URL, закрытые для роботов

Тема в разделе "Зарубежные поисковики", создана пользователем Ssendem, 21 сен 2013.

  1. Ssendem

    Ssendem

    Регистр.:
    28 май 2010
    Сообщения:
    415
    Симпатии:
    466
    URL сайта или страницы:snacks-club.com.ua
    Вопрос: Сайт на Prestashop, заполнял все сам, описание к позициям тоже мои, фото тоже мои(из интернета не брал), многое ещё будет добавляться к внесенным товарам(видео, доп. характеристики), но не могу понять почему уже пару месяцев после запуска сайта одна и та же картина +/-:
    Веб-страницы 186(Отправлено) 52(Проиндексированные)
    Картинки 160(Отправлено) 4(Проиндексированные)
    Предупреждений: 194(12 шт. URL, закрытые для роботов и 182 шт. Доступ к URL заблокирован в файле robots.txt)
    Была ошибка самой Prestashop, при генерации robots.txt создалась запись:
    # Files
    Disallow: /*uk/
    Disallow: /*ru/
    я это дело удалил и проверил вручную через "Заблокированные URL" URL-адреса страниц и изображенийна что мне дан ответ:
    Робот Google и Googlebot-Mobile - Разрешено, но при этом Заблокированные URL 380
     
  2. demolg

    demolg

    Регистр.:
    13 авг 2007
    Сообщения:
    231
    Симпатии:
    76
    Когда изменяли robots.txt? Возможно Google еще не успел переиндексировать сайт с новым robots.txt
     
  3. _sergey_

    _sergey_ Писатель

    Регистр.:
    1 окт 2008
    Сообщения:
    1.744
    Симпатии:
    1.154
  4. Ssendem

    Ssendem

    Регистр.:
    28 май 2010
    Сообщения:
    415
    Симпатии:
    466
    Последнее изменение 30.06.2013
     
  5. Ssendem

    Ssendem

    Регистр.:
    28 май 2010
    Сообщения:
    415
    Симпатии:
    466
    т.е. Вы считаете, что все нормально?
     
  6. _sergey_

    _sergey_ Писатель

    Регистр.:
    1 окт 2008
    Сообщения:
    1.744
    Симпатии:
    1.154
    Я считаю нормально, если все нужные страницы проиндексированы, а все ненужные отдают 404 ошибку или недоступны для ботов. А сколько там страниц всего недоступно, это уже дело ботов.
     
    Ssendem нравится это.