скритие линкопомойки от поисковиков

Тема в разделе "Вопросы новичков", создана пользователем Bicdibus, 5 апр 2011.

Статус темы:
Закрыта.
  1. Bicdibus

    Bicdibus

    Регистр.:
    5 мар 2010
    Сообщения:
    486
    Симпатии:
    7
    использую сервис автообмена ссылками,но он создает на сайте страг\ницу линкопомойку.Как спрятать ету страницу и ссылку на нее ссылку заключил в теги ноиндекс,в роботс запретил страницу к индексации,но гугль ее сожрал гад Посоветуйте что-нибудь
     
  2. vladis1333

    vladis1333

    Регистр.:
    18 июл 2010
    Сообщения:
    588
    Симпатии:
    226
    Как запрещал к индексации? строчку из роботс приведи здесь., возможно не правильно делал.
     
  3. Bicdibus

    Bicdibus

    Регистр.:
    5 мар 2010
    Сообщения:
    486
    Симпатии:
    7
    вот весь роботс
    User-agent: *
    Disallow: /eicoc.php
     
  4. antonyz

    antonyz Создатель

    Регистр.:
    10 мар 2010
    Сообщения:
    32
    Симпатии:
    1
    если гугл её не индексирует это ещё не значит что он по ней не ползает и не смотрит что там за контент...
     
  5. vladis1333

    vladis1333

    Регистр.:
    18 июл 2010
    Сообщения:
    588
    Симпатии:
    226
    Скройте конктретно эту страницу
    <html>
    <head>
    <meta name="robots" content="nofollow" />
    <title>Don't index this page</title>
    </head>

    выписка из вики. Google — обратные ссылки с тегом nofollow отображаются и не отчищаются. Как правило, в список обратных ссылок c атрибутом nofollow попадают сайты с тематических и трастовых ресурсов. Значение в ранжировании обратных ссылок с тегом nofollow гораздо меньше чем у прямой ссылки.

     
  6. E-body

    E-body

    Регистр.:
    6 сен 2007
    Сообщения:
    980
    Симпатии:
    315
    Вот еще вариан котрый не будет виден посковика а юзерам видно
    В папке ../links/ будут линкопмойки, но чтобы поисковики этот ужас не видели запреим через .htaccess
    PHP:
    # BAN ненужным поисковым ботам
    RewriteCond %{HTTP_USER_AGENT} ^.*google-bot [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*googlebot [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*google [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*yandex-bot [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*Wget
    RewriteCond 
    %{HTTP_USER_AGENT} ^.*HTMLParser [OR] 
    RewriteCond %{HTTP_USER_AGENT} ^.*psbot [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*msn [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*liveinternet [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*WebAlta [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*Yanga [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*Twiceler [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*Flexum [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*Aport [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*Slurp [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*msnbot [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*ia_archiver [OR]
    RewriteCond %{HTTP_USER_AGENT} ^.*libwww-perl
    RewriteRule 
    ^(.*)$ - [F,L]
    правильные юзер агенты поисковиков добавьте сами
     
  7. Bicdibus

    Bicdibus

    Регистр.:
    5 мар 2010
    Сообщения:
    486
    Симпатии:
    7
    тоесть добавить между хедами єто <meta name="robots" content="nofollow" /> и страница не индекситься.Я правильно понял
     
  8. E-body

    E-body

    Регистр.:
    6 сен 2007
    Сообщения:
    980
    Симпатии:
    315
    Правильнее <meta name="robots" content="noindex, nofollow" />
    noindex - не индекировать страницу поисковикам.
    nofollow - не переходить по ссылкам страницы поисковикам
     
  9. frantz1488

    frantz1488

    Регистр.:
    21 мар 2010
    Сообщения:
    162
    Симпатии:
    43
    исключения в роботс.тхт нужно приводить для каждого поисковика отдельно тоесть для яндекса это
    HTML:
    User-agent: Yandex
    Disallow: /page.php
    и для гугла
    HTML:
    User-agent: Googlebot
    Disallow: /page.php
    а для других так

    HTML:
    User-agent: *
    Disallow: /page.php
     
  10. Bicdibus

    Bicdibus

    Регистр.:
    5 мар 2010
    Сообщения:
    486
    Симпатии:
    7
    а после изменений роботса и метатега гугль отригнет етот файл?
     
Статус темы:
Закрыта.