Что надо закрывать от индексации?

Статус
В этой теме нельзя размещать новые ответы.
А какая разница - трастовый ресурс или нет, ведь ПР то перетекает с вашего сайта по ссылке не закрытой для ПСов?!

Возможно имеется в виду то, что открытая ссылка на Li, т. е. на трастовый ресурс, не окажет никакого отрицательного влияния на траст вашего сайта. А вот открытая ссылка на Варез/порно-портал под фильтром может негативно отразится на вашем трасте, а если еще этих ссылок будет много, тогда вообще...
 
Для wp использую такой robots:

User-agent: *

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /xmlrpc.php

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content

Disallow: /tag/

Disallow: /trackback/

Disallow: /feed/

Disallow: /comments/

Disallow: */trackback/

Disallow: */feed/

Disallow: */comments/

Disallow: /?feed=

Disallow: /?s=

Sitemap: Для просмотра ссылки Войди или Зарегистрируйся
 
Вот достойный хороший ответ которого я так долго ждал )
:tcl:
 
А контекстую рекламу стоит заркывать в noindex или нет?
 
Если я закорю меню, как робот будет переходить на другие страницы сайта? Или если карта проглочена то все будет ок?
Есть несколько способов. Например, sitemap.xml.
Кстати, такое решение позволяет снизить нагрузку на сайт от посещения роботов (когда меню закрывают ноуиндексом)
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху