[Помощь] Яндекс выдает ошибки при индексации

[Kosiak]

А можно где нибудь уже взять готовый файл robots.txt для форума? а то я хз чо там писать

robots.txt доступен из браузера и должен лежать в корне всех сайтов. Я думаю не сложно будет найти форумы на IPB и посмотреть как это сделано у них.

 

[Mons]

robots.txt, Назначение, синтаксис и прочее…

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Пример:

User-agent: *
Disallow: /user
Disallow: /library/photoshop/font/common_fonts/

Посмотрел по свему форуму и прошелся по 3 м крупнейшим.. не ставят. Нет нужды.