если редирет стоит на странице запрещенной в robots.txt то гугл это палит?

Тема в разделе "Вопросы новичков", создана пользователем yrazz, 1 мар 2010.

Статус темы:
Закрыта.
  1. yrazz

    yrazz Постоялец

    Регистр.:
    5 янв 2008
    Сообщения:
    103
    Симпатии:
    1
    если редирет стоит на странице запрещенной в robots.txt то гугл это палит?
    содержимое роботс
    User-agent: *
    Disallow: /index2.html
    Host: xxxxx.com
    Sitemap: xxxxx.com/sitemap.xml


    или лучше не изобретать велосипед?:(
     
  2. yrazz

    yrazz Постоялец

    Регистр.:
    5 янв 2008
    Сообщения:
    103
    Симпатии:
    1
    и гуглу не подозрительно что со всех страниц внутряков идет ссылка на страницу запрещенную в роботс?.... и не принимает карательных мер?

    Добавлено через 21 минуту
    а если поставить рандомный по времени редирект 2-4 секунды?...
    чтобы тулбар гугла не палил....
     
  3. artcosmic

    artcosmic

    Регистр.:
    16 сен 2008
    Сообщения:
    198
    Симпатии:
    161
    Поисковик палит переход при помощи тулбара.
    Поэтому в принципе все равно, где и как вы разместите кнопку/скрипт/страницу перехода.
    Палится сам факт перехода и время пребывания юзера на странице. Собирается статистика, при достаточном накопленном количестве она анализируется и алгоритмы принимают решение - дор это или не дор.

    Можно попробовать сделать легкий клоакинг - не показывать кнопку юзерам с тулбаром. Но я хз как это делается, надо экспериментировать.
     
  4. fima32

    fima32

    Регистр.:
    25 дек 2007
    Сообщения:
    201
    Симпатии:
    13
    Все, что указано в роботсе, это всего лишь рекомендации для поисковиков, а не правила, так что они их могут и не выполнять(что уже виделось мною неоднократно).
    Если хотите спрятать страницу от бота, то либо через .htaccess, либо клоакингом.
    Но, как сказали выше, все равно все спалится гуглбаром. Другой вопрос, сумеете/успеете(нужное подчеркнуть) ли Вы снять сливки до бана.
     
  5. yrazz

    yrazz Постоялец

    Регистр.:
    5 янв 2008
    Сообщения:
    103
    Симпатии:
    1
    а если делать случайный по времени редирект 1-4 секунд.. как тулбар это палит не пойму...?
     
  6. trancep

    trancep Создатель

    Регистр.:
    30 сен 2006
    Сообщения:
    15
    Симпатии:
    0
    Возможно так: юзера редиректит на дор, с дора на фид, там что-то не нравится и юзверь вновь лезет в гугл, тут и собирается статистика пребывания на вашем доре, ну это так, мысль.
     
  7. evgenii2090

    evgenii2090 Постоялец

    Регистр.:
    29 янв 2009
    Сообщения:
    89
    Симпатии:
    6
    Авторитетный источник утверждает, что тулбар сливает инфу о времени проведенном пользователем на сайте, если более 20% пользователей покидают сайт в первые 10 секунд, то очень вероятно, что это дор или же сайт малоинтересен пользователям.


    Страници, закрытые в роботс.тхт поисковики не индексируют, но совершенно не факт, что они туда не заглядывают, ну а как они отнесутся к тому, что там найдут - вопрос вообще филосовский :)
     
  8. feddka

    feddka Создатель

    Регистр.:
    16 апр 2009
    Сообщения:
    21
    Симпатии:
    1
    На JS ничего сложного сделать редирект с фильтрацией по юзерагенту и не ридеректить тулбар и ботов. Пробовал но на скорейший бан не повлияло :nezn:
     
  9. betatest

    betatest

    Регистр.:
    3 дек 2007
    Сообщения:
    517
    Симпатии:
    127
    прекрасно палится, в роботс рекомендация для робота, но робот всё равно пройдет и посмотрит, ЧТО там находится - это 100%, просто индексировать для выдачи её не будет (и то - не факт)

    можно сделать через яву в отдельном файле на забаненом домене - более эффективно, пока
     
  10. AndyFire

    AndyFire

    Регистр.:
    22 май 2008
    Сообщения:
    243
    Симпатии:
    18
    Хм, а как в JS определить, что установленн тулбар?(что то ни чего в голову не приходит)
     
Статус темы:
Закрыта.