robots.txt и Googlebot

Тема в разделе "Opencart", создана пользователем BebOp, 15 апр 2015.

Информация :
Внимание форумчане! При создании тем, или выкладывании какой-либо информации проверьте в какой ветке форума вы находитесь! Не путайте Opencart и Opencart2. При несоблюдении данного условия выносится соответствующее наказание! И потом не говорите что вас НЕ ПРЕДУПРЕЖДАЛИ! По возможности используйте обменники mail, yandex, google, dropbox, rghost Дабы избежать просьб перезалить и проблем с рекламой!
Модераторы: ZiX
  1. BebOp

    BebOp Создатель

    Регистр.:
    21 фев 2008
    Сообщения:
    48
    Симпатии:
    9
    В связи с новым алгоритмом поиска решил посмотреть как видит Googlebot мой сайт.
    И был в шоке.
    [​IMG]
    Не смотря на это сайт прекрасно отображается на всех мобильных устройствах и планшетах.
    После недолгих размышление удаляю содержимое robots.txt и запускаю проверку еще раз.
    И вуаля
    [​IMG]

    Добавляю свой robots.txt может вы подскажете что тут не так
     
  2. v0ff

    v0ff Постоялец

    Регистр.:
    15 ноя 2012
    Сообщения:
    53
    Симпатии:
    7
    Так у тебя же бутстрап находится в /catalog/view/theme/lexus_yourstyle/stylesheet/stylesheet.css
    И ты его рубиш: Disallow: /catalog
     
  3. BebOp

    BebOp Создатель

    Регистр.:
    21 фев 2008
    Сообщения:
    48
    Симпатии:
    9
    Я понял.
    Поправил спс тебе
    [​IMG]
    А то что он открыт для индекса ничего страшного?
     
  4. v0ff

    v0ff Постоялец

    Регистр.:
    15 ноя 2012
    Сообщения:
    53
    Симпатии:
    7
    даядумаю роботам в твоей папке /catalog мало что интерестно для роботов, да и шаблон для кеша будет более подходящим !