robots.txt и сабдомен

Тема в разделе "Вопросы новичков", создана пользователем nemeve, 5 апр 2008.

Статус темы:
Закрыта.
  1. nemeve

    nemeve Постоялец

    Регистр.:
    29 дек 2007
    Сообщения:
    70
    Симпатии:
    4
    Как повлияет на индексацию robots.txt, если сделать так:
    _ttp://sait.domain.com/robots.txt

    Будет ли робот читать robots.txt?

    by SolutionFix: C твоей стороны было бы куда этичнее не напрягать других вопросами, ответы на которые общеизвестны, их очень легко найти и такие ответы не являются результатом чьего-либо опыта. Набери в поиске "что такое robots.txt" и читай себе на здоровье.
     
  2. harpeos

    harpeos

    Регистр.:
    10 сен 2007
    Сообщения:
    172
    Симпатии:
    111
    Конечно робот будет читать и обрабатывать файл robots.txt. Но есть также хитроботы, которые будут его игнорировать.
     
    nemeve нравится это.
  3. bushwaka

    bushwaka Читатель

    Заблокирован
    Регистр.:
    3 апр 2008
    Сообщения:
    12
    Симпатии:
    0
    Не знаю о каких вы говорите хитроботах, у меня лично пруд пруди доменов именно тким образом висят, все нормально себя чувствуют и роботы поисковиков их нормально читают!
    з.ы. а вот по поводу хитроботов поподробней, если конечно не жалко.:ah:
     
  4. nemeve

    nemeve Постоялец

    Регистр.:
    29 дек 2007
    Сообщения:
    70
    Симпатии:
    4
    Скажите, пожалуйста, а будет robots.txt влиять на время индексации?
     
  5. sw04

    sw04 seoplayer

    Регистр.:
    1 дек 2007
    Сообщения:
    601
    Симпатии:
    193

    конечно же нет.
    в роботс.тхт содержаться лишь указания, что индексировать и кому.
     
    nemeve нравится это.
  6. harpeos

    harpeos

    Регистр.:
    10 сен 2007
    Сообщения:
    172
    Симпатии:
    111
    Ну например ты редирект какой-нибудь в robots.txt закрыл. И этим хитроботам будет пофигу закрыл ты его или нет, они всё равно его выполнят (ну или попытаются выполнить :D), и в итоге побанят доменчик.
     
  7. bushwaka

    bushwaka Читатель

    Заблокирован
    Регистр.:
    3 апр 2008
    Сообщения:
    12
    Симпатии:
    0
    А мозг для чего? Помоему как раз он решает такие глупости... Я думал Вы мне что-то новое откроете, увы...:( Ну ладно, все старое, порой приходится вспоминать...:yahoo:
    Порой даже не верный роботс, становится помехой для жизни домена в некоторых поисковиках, особенно тех кто привередливый...
     
Статус темы:
Закрыта.