Куча не понятных 404

Тема в разделе "Поисковые машины", создана пользователем new_forward, 20 окт 2014.

Статус темы:
Закрыта.
Модераторы: jabbaxatt, Sorcus
  1. new_forward

    new_forward

    Регистр.:
    5 май 2008
    Сообщения:
    669
    Симпатии:
    44
    Доброго времени суток, недавно сайт с посещаемости в 2500 упал до 300 в сутки, все из-за того что появилось около 3000 страниц 404 ошибки, мало того что урлы страниц яша показывает такие что на сайте никогда не было...на скрине видно. Перейти по ссылке

    1. Скажите как защитить сайт от такого рода спама, ведь яша их где то взял?
    2. Как оперативно сообщить яше об исправленных 404 ошибках?
     
  2. t0wer

    t0wer BlackHerald

    Регистр.:
    24 июн 2008
    Сообщения:
    735
    Симпатии:
    424
    1. Взял он только у Вас. Делайте, перед тем как развивать проект, сразу внутреннюю и внешнюю оптимизацию сайта. Как следствие, не увидите подобного.
    2. Что в Вашем понимании "оперативно сообщить яше об исправленных 404 ошибках"? Если это 404, то нужно убирать линки с индекса Я. Если страницы есть, но нет явного ответа 404 (показывает страницу 404, но нет кода ответа 404), то закрываем в роботс от индексирования, ставим 404 редирект и после убираем с индекса.
     
  3. Slaxor

    Slaxor Постоялец

    Регистр.:
    23 май 2012
    Сообщения:
    72
    Симпатии:
    27
    во первых киньте их все в robots.txt, а дальше надо копать откуда они
     
  4. md7

    md7 Создатель

    Регистр.:
    26 ноя 2013
    Сообщения:
    24
    Симпатии:
    5
    Если эти страницы сейчас отдают 404 ошибку, то в robots их нету смысла запрещать, они и так в индекс не попадут

    Самое главное - откуда такие страницы появилиь. Не видя сайт и не знаю историю работы с ним, трудно что-то сказать. Но, 1 - это или происки конкурентов, например, начали спамить по таким урлам, чтобы на них были ссылки, хотя такое маливероятно. 2 - возможно на сайте были такие страницы (например, теги или ещё что-то) затем изменили что-то, например формирование ЧПУ и такие страницы стали отдавать 404. 3-сайт ломанули и залил дорвей
     
  5. andyvein

    andyvein Создатель

    Регистр.:
    4 ноя 2014
    Сообщения:
    12
    Симпатии:
    3
    c .htaccess не чего не делали? возможно с какой то момент он был кривым и поисковик получил кучу левых страниц в индекс
     
  6. new_forward

    new_forward

    Регистр.:
    5 май 2008
    Сообщения:
    669
    Симпатии:
    44
    Спасибо всем, получилось так что гугл нашел очень старый сайтмэп, времен когда сайт еще был другой тематики....вот и глотнул кучу ссылок... в общем в .htaccess поставил 301-е редиректы на существующие похожие категории, посмотрим что получится. :glob:
     
  7. bezzubtsev

    bezzubtsev

    Регистр.:
    14 май 2015
    Сообщения:
    261
    Симпатии:
    77
    После перекеширования не забудьте удалить лишние 301 редиректы - так отклик сайта будет гораздо быстрее, чем с тонной текста в .htaccess
     
  8. trifonov1992

    trifonov1992 Создатель

    Регистр.:
    10 июл 2015
    Сообщения:
    20
    Симпатии:
    2
    Закройте лучше такие страницы nonidex nofollow (в head meta robots), а не через роботс.тхт так они вылитят из индекса намного быстрее
     
Статус темы:
Закрыта.