Нужна помощь с robots.txt
- Автор темы amazon
- Дата начала
- Статус
не совсем. Например, гугл не так критично относится к дублям контента, а яша за это с поиска выкидывает.
У себя для яндекса прописываю отдельные правила, ибо ну его нафик, разбираться потом почему он счел именно эту страницу самой информативной, и почему закрыл от индекса целую директорию.
- Регистрация
- 5 Сен 2009
- Сообщения
- 699
- Реакции
- 611
- Модер.
- #14
Пустая строка должна быть по стандартам после строки Disallow: /noindex.php
- Статус