Помощь Robots блокирует ссылки в sitemap

Тема в разделе "Opencart", создана пользователем pifagor82, 28 окт 2015.

Информация :
Внимание форумчане! При создании тем, или выкладывании какой-либо информации проверьте в какой ветке форума вы находитесь! Не путайте Opencart и Opencart2. При несоблюдении данного условия выносится соответствующее наказание! И потом не говорите что вас НЕ ПРЕДУПРЕЖДАЛИ! По возможности используйте обменники mail, yandex, google, dropbox, rghost Дабы избежать просьб перезалить и проблем с рекламой!
Модераторы: ZiX
  1. pifagor82

    pifagor82 Добрый человек

    Регистр.:
    22 май 2012
    Сообщения:
    325
    Симпатии:
    222
    Друзья, подскажите пожалуйста, в чем может быть проблема и как это можно решить?
    [​IMG]

    Robots.txt:

    Sitemap:
     
    Noone нравится это.
  2. fr4nt

    fr4nt Создатель

    Регистр.:
    5 авг 2011
    Сообщения:
    12
    Симпатии:
    1
    Там можно посмотреть, какие именно страницы блокируются роботсом.
     
  3. pifagor82

    pifagor82 Добрый человек

    Регистр.:
    22 май 2012
    Сообщения:
    325
    Симпатии:
    222
    Подскажите как єто можно сделать, где посмотреть. Вы можете конкретно показать страницу в роботс и в карте?
     
    Noone нравится это.
  4. zxcvb333

    zxcvb333 Создатель

    Регистр.:
    13 ноя 2013
    Сообщения:
    35
    Симпатии:
    5
    Инструмент проверки файла robots.txt
    там внизу есть строка для ввода адреса. Вводите любую заблокированную страницу и оно сразу покажет какой директивой блокируется индекс.
     
    Renny нравится это.
  5. pifagor82

    pifagor82 Добрый человек

    Регистр.:
    22 май 2012
    Сообщения:
    325
    Симпатии:
    222
    Разобрался сам. На форумах нашел инфу что касается опенкарта. Удалил одну строку из роботс и всё решилось.
     
    Noone нравится это.
  6. Animal

    Animal Постоялец

    Регистр.:
    2 мар 2015
    Сообщения:
    79
    Симпатии:
    26
    Прикольный шаб не подскажешь как называется ?
     
  7. Ask4morE

    Ask4morE Создатель

    Регистр.:
    18 янв 2009
    Сообщения:
    38
    Симпатии:
    1
    Доброго времени суток
    У меня точно такая же проблема. Причем, пишет не ошибку а предупреждение.
    Пробовал пустой файл robots.txt но, проблема не проходит. (возможно надо подождать несколько дней?)
    Инструмент проверки от гугл пишет, что страница не заблокирована.
    Имеется
    site.com
    site.com/about_us , указываются гуглом как пример.
    Все банальные варианты уже проверил:
    sitemap.xml доступен, открывается быстро. (единственное что, нет физического файла, он генерируется и выдается)
    robots.txt доступен
    Пример сайта привести не могу. Версия opencart 2.0.1.1
    Буду признателен, за любую помощь в данном вопросе.
     

    Вложения:

  8. Fori

    Fori Создатель

    Регистр.:
    2 сен 2015
    Сообщения:
    31
    Симпатии:
    0
    У меня была схожая проблема, только с версией 1.5, но я изменил robots и прописал корректно файл sitemap и через время, после очередной индексации - прошло.
     
  9. Ask4morE

    Ask4morE Создатель

    Регистр.:
    18 янв 2009
    Сообщения:
    38
    Симпатии:
    1
    В общем, я разобрался. Так совпало, что у меня несколько сайтов выпускались плюс минус в одно и тоже время.
    В какой-то момент времени google нашел сайт, понюхал роботс в котором написано закрыть от индексации все и всех и запомнил это.

    Когда я открыл сайт для ПС страницы были скушаны, но даже главная и информационные страницы были якобы заблокированы - причина в том, что гугл не успевает переварить информацию разными сервисами одновременно.

    Я ничего не делал и через 2 недели все ошибки чудесным образом пропали. Хочу подчеркнуть, это "работает" в случае, если проверка robots.txt говорит что все в порядке.