Скрыть от индексации старые страницы

Тема в разделе "Поисковые машины", создана пользователем masterlan, 8 янв 2019.

Модераторы: Sorcus
  1. masterlan

    masterlan

    Регистр.:
    14 окт 2009
    Сообщения:
    584
    Симпатии:
    53
    В общем, есть сайт на котором опубликовано порядка 200-300 страниц, которые удалять нельзя.
    Удалять их нельзя, но нужно скрыть от индексации.
    Пока скрыли сайт от индексации, но это не выход, по тому, что нужно чтобы новые страницы индексировались.

    Как за раз скрыть от индексации страницы (посты и страницы), что бы новые записи были открыты для индексации в ПС ?
     
  2. DzSoft

    DzSoft 3T

    Регистр.:
    13 сен 2007
    Сообщения:
    354
    Симпатии:
    270
    1. Новые страницы у вас и так индексируются. Если они не скрыты у вас от индексации.
    2. Закрыли сайт - потеряли трафик. Большая ошибка.
    3. Старые новости в индексе никак не влияют на индексацию новых. Если вы их не переписываете. К тому же это дополнительный трафик, что есть гуд.
    Продолжайте в том же духе и ваш икс станет игриком
     
  3. Krazik

    Krazik Создатель

    Регистр.:
    20 июл 2015
    Сообщения:
    22
    Симпатии:
    4
  4. Anton

    Anton ¯\_(ツ)_/¯

    Moderator
    Регистр.:
    28 авг 2007
    Сообщения:
    697
    Симпатии:
    684
  5. Q_BASIC

    Q_BASIC

    Регистр.:
    30 ноя 2013
    Сообщения:
    501
    Симпатии:
    1.192
    не знаю как сейчас, но гугл их выводил недавно еще в поиске, только там где обычно краткий текст, там было "Содержание скрыто в robots.txt"
     
  6. Iga

    Iga

    Регистр.:
    12 янв 2014
    Сообщения:
    409
    Симпатии:
    69
    Да, не очень понятно почему старые страницы, которые ещё и нельзя удалять, не должны быть в индексе. Т.е. попадать на эти страницы кто-то должен, но не через поисковики?

    А так, 200 страниц можно и ручками в robots внести.
     
  7. alexbelij

    alexbelij Постоялец

    Регистр.:
    13 мар 2012
    Сообщения:
    61
    Симпатии:
    37
    тож такое заметил.
    а вообще сделай просто закрытый доступ для зарегистрированных пользователей. надо отталкиваться от цели сокрытия. можешь фильтровать по реферер, заголовкам, регистрации и тд, кого пускать, а кого - нет
     
  8. Андрей100500

    Андрей100500 Писатель

    Регистр.:
    8 сен 2017
    Сообщения:
    2
    Симпатии:
    3
    Роботс - это не указание, это рекомендация. Этот файл очень часто успешно игнорируется поисковиками. И скорее всего не сработает для страниц, которые уже в индексе.
    Единственный верный и на 100% рабочий способ убрать страницы из индекса - выдать <meta name="robots" content="noindex, nofollow"/> в код страницы (в пределах <head>...</head>).
     
    Iga нравится это.