Закрыть от индексации страницы

Тема в разделе "Поисковые машины", создана пользователем TYMON_krot, 1 авг 2019.

Модераторы: Sorcus
  1. TYMON_krot

    TYMON_krot Постоялец

    Регистр.:
    18 авг 2017
    Сообщения:
    75
    Симпатии:
    8
    Здравствуйте. У меня есть куча страниц с пагинацией которые я бы хотел закрыть от индексации (так надо), вот пример:

    https://site.ru/category/dom/results,31-60
    https://site.ru/category/dom/results,61-90

    и т.д.

    Подскажите, пожалуйста, как закрыть от индексации все страницы со словом results?

    Вот так помогло:

    Disallow: */results
     
    Последнее редактирование: 5 авг 2019
  2. Snake Sanders

    Snake Sanders Создатель

    Регистр.:
    5 ноя 2015
    Сообщения:
    20
    Симпатии:
    4
    WP
    PHP:
    /**
     * Закрытие страниц пагинации от индексирования
     */
    add_action'wpseo_head''art_noindex_paged');
    function 
    art_noindex_paged() {

        if ( 
    is_paged() ) {
            
    add_filter'wpseo_canonical''__return_false' ); // отключаем канонические ссылки
            
    add_filter'wpseo_disable_adjacent_rel_links''__return_true' );// отключаем теги prev|next
            
    echo '<meta name="robots" content="noindex,nofollow">';

        }
    }
     
  3. m3ow.com

    m3ow.com Постоялец

    Регистр.:
    22 июл 2017
    Сообщения:
    98
    Симпатии:
    4
    Так можно ведь просто закрыть в robots.txt все виды страниц пагинации, если у них есть признак по урлу.

    например:
    Disallow: /page/*
     
  4. Minor

    Minor

    Регистр.:
    16 авг 2012
    Сообщения:
    245
    Симпатии:
    100
    Закрытые в robots не является гарантией того, что они не будут проиндексированы, это рекомендация.
     
  5. 1234509876

    1234509876 Писатель

    Регистр.:
    12 апр 2013
    Сообщения:
    9
    Симпатии:
    0
    Почему нет? для нормальных поисковиков(Yandex, Google, Yahoo) эта рекомендация и есть гарантия, но есть еще куча непонятных, которые живут по своим правилам... (mail.ru, rambler например....)
     
  6. Anton

    Anton ¯\_(ツ)_/¯

    Moderator
    Регистр.:
    28 авг 2007
    Сообщения:
    698
    Симпатии:
    685
    https://support.google.com/webmasters/answer/6062608?hl=ru

    Файл robots.txt не предназначен для блокировки показа веб-страниц в результатах поиска Google.
    Если файл robots.txt запрещает роботу Googlebot обрабатывать веб-страницу, она все равно может показываться в Google