[Ищу] скрипт создания robots.txt

[Dador]

Есть довольно полезная фича от яндекса "роботс глазами яндекса" -

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Мне часто помогает