Проблема с robots.txt

Статус
В этой теме нельзя размещать новые ответы.

rentgen200931

Создатель
Регистрация
25 Ноя 2009
Сообщения
18
Реакции
0
Проблема вот в чем. Есть сайт на DLE. Сегодня залез в webmaster гугла, и увидел вот какую картину: в robots.txt запрещены к индексации все статьи. Однако я не запрещал. Вот сам robots.txt:

User-agent: *
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /index.php?do=register
Disallow: /index.php?do=lastcomments
Disallow: /index.php?do=stats
Disallow: /index.php?do=pm
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /statistics.html
Disallow: /index.php?do=addnews
Disallow: /index.php?do=register
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?subaction=newposts
Sitemap: Для просмотра ссылки Войди или Зарегистрируйся
User-agent: Yandex
Host: site.ru


На сайте полтора месяца лежит фильтр Яши, может это повлияло?
Что может быть? Как исправить?
 
Все, пардон. Разобрался.:)
 
ТС, нужно было написать, что именно не так, может, кому-то пригодится.
Вот тут ошибка:
Disallow: /index.php?subaction=newposts
Не нужна эта строка. Запрещает индексацию раздела "Непрочитанное", куда попадают все новые посты :)
 
Там все правильно было в вебмастере))) Это я невнимательно посмотрел. Там запрещены к индексации статьи для печати. Кстати, надо их запрещать для индексации или нет?
 
Там все правильно было в вебмастере))) Это я невнимательно посмотрел. Там запрещены к индексации статьи для печати. Кстати, надо их запрещать для индексации или нет?

Да нужно закрывать от индексации , так как это дубли страниц !
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху