Как правильно прописать robots.txt для зеркала

Статус
В этой теме нельзя размещать новые ответы.

demon201984

Постоялец
Регистрация
27 Сен 2008
Сообщения
132
Реакции
19
Необходимо правильно прописать robots.txt для зеркала, чтобы обозначить основное зеркало. Как это сделать грамотно в моем случае не пойму.

Имеется сайт: Для просмотра ссылки Войди или Зарегистрируйся
его полным зеркалом является раздел на сайте Для просмотра ссылки Войди или Зарегистрируйся

Для просмотра ссылки Войди или Зарегистрируйся - является уникальным сайтом, зеркал у него нет, соответственно, так как robots.txt хранится лишь в корне сайта я не могу прописать в нем значение Host: Для просмотра ссылки Войди или Зарегистрируйся - что позволило бы определить что главным является данный хост.

Для сайта Для просмотра ссылки Войди или Зарегистрируйся в данный момент прописано в robots.txt:
Host: Для просмотра ссылки Войди или Зарегистрируйся
Для сайта Для просмотра ссылки Войди или Зарегистрируйся Host: Для просмотра ссылки Войди или Зарегистрируйся

В итоге Яндекс определил что главным все же является Для просмотра ссылки Войди или Зарегистрируйся и Для просмотра ссылки Войди или Зарегистрируйся в поисковой выдаче резко упал. Хотя зеркалом является лишь раздел на сайте.

Помогите, очень нужно решить проблемку
 
как вариант сделать 301 редирект с www.site1.ru/forum на www.site.ru, либо закрыть от индексации www.site1.ru/forum. Может скоро яндекс начнет поддерживать тег canonical
 
Неужели нет других вариантов? Как временное решение все же решил запретить индексацию www,site1.ru/forum - жаль конечно, он реально популярнее чем Для просмотра ссылки Войди или Зарегистрируйся.
 
Подход для определения главного сайта с точки зрения яши и гугля несколько различаются.

Для яндекса:
Прописываем в robots.txt на приклеиваемом домене


Для Google:
Регистрируем все зеркала в сервисе Google Инструмент для веб-мастеров. После этого нужно подтвердить права на управление сайтами.
Затем переходим по ссылке “Настройки” – “Основной домен” и ставим галочку, что необходимо. Сохраняем. Все готово.

Робот-зеркальщик работает небыстро, иногда склейка зеркал затягивается на пару месяцев
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху