Теги скрывающие контент от поисковика. Как?

Тема в разделе "Вопросы новичков", создана пользователем Hopsright, 8 мар 2015.

  1. Hopsright

    Hopsright Постоялец

    Регистр.:
    2 ноя 2013
    Сообщения:
    128
    Симпатии:
    7
    Доброго времени суток уважаемые форумчане.
    Есть сайт и много контента, но контент не ввесь уникальный. Планируем делать много ререайта, но хотелось бы быть стабильным издателем и радовать посетителей стабильно обновляемой массой информации, в связи с этим возникла такая идея; А сто если контент, который не есть уникальным, а именно текст, при публикации выделять какими то тегами и просто скрывать эту часть страницы от поисковых машин. А уникальный не скрывать:) И овцы целы - и волки сыты.
    На сайте немеряно контента, что-то уникальное, что-то просто для массовки.
    Подскажите как реализовать такую штуку...
    Заранее благодарен

    P.S также подскажите пару программ кроме Advego которые проверяют текст на уникальность.
    Спасиб большое
     
  2. Freeb

    Freeb Создатель

    Регистр.:
    10 апр 2006
    Сообщения:
    21
    Симпатии:
    5
    Есть три варианта скрытия контента от поисковика.

    1. Закрытие страницы от индексации в robots.txt
    Код:
    User-agent: *
    Disallow: /page.html
    2. Добавление мета-тэга в head страницы:
    HTML:
    <meta name="robots" content="noindex, nofollow" />
    3. Оборачивание контента в noindex:
    HTML:
    <noindex>контент</noindex>
    3 вариант не работает для Google.
     
  3. Hopsright

    Hopsright Постоялец

    Регистр.:
    2 ноя 2013
    Сообщения:
    128
    Симпатии:
    7
    А етсь что-то типа третьего варианта только для google?
     
  4. igorenia

    igorenia Постоялец

    Регистр.:
    12 окт 2013
    Сообщения:
    98
    Симпатии:
    74
    Через JavaScript еще можно закрыть, правда для всех поисковиков, вот пример.
     
  5. Freeb

    Freeb Создатель

    Регистр.:
    10 апр 2006
    Сообщения:
    21
    Симпатии:
    5
    Яндекс и Гугл умеют обрабатывать JS. Не знаю на счёт учёта текста, но по ссылкам, которые сгенерированы JS, их боты переходят.
     
  6. Girt

    Girt Постоялец

    Регистр.:
    11 фев 2012
    Сообщения:
    87
    Симпатии:
    62
    Можно попробовать через JS в зависимости от userAgent, например если это GoogleBot, то не показывать определённый контент, а остальным показывать.
     
  7. kireevsasha

    kireevsasha Создатель

    Регистр.:
    22 фев 2012
    Сообщения:
    19
    Симпатии:
    5
    Не получится такого, боты все равно найдут и проиндексируют... можно поиграться с AJAX запросами, их они еще не все могут побороть. А вообще, лучше как обычно - текст в виде картинок ;) вот их точно пока не расшифровывают поисковики...
     
  8. Girt

    Girt Постоялец

    Регистр.:
    11 фев 2012
    Сообщения:
    87
    Симпатии:
    62
  9. kireevsasha

    kireevsasha Создатель

    Регистр.:
    22 фев 2012
    Сообщения:
    19
    Симпатии:
    5
    "Не будет индексироваться" и "не будет учитываться алгоритмом выдачи" - это совершенно разные понятия ;) Гугл все видит, все считает. Он может помочь что-то убрать из индекса, что Вам не нужно, но это не спасет от пессимизации в выдаче, если ему что-то не понравится в контенте.
     
  10. Girt

    Girt Постоялец

    Регистр.:
    11 фев 2012
    Сообщения:
    87
    Симпатии:
    62
    В таком случае, как вариант, использовать iframe со ссылкой на url, закрытый в robots.txt