1. Уважаемые пользователи, прежде чем ответить в теме или создать новую,
    внимательно ознакомьтесь с правилами раздела

    Кому лень работать или руки не оттуда - пользуйтесь услугами специалистов
  2. Не задавайте глупых вопросов "Посоветуйте какой-нибудь компонент.."

    Есть JED!!! Ищите там!!!

Анализ robots.txt

Тема в разделе "Joomla", создана пользователем Lobo, 29 окт 2010.

Информация :
  • Уважаемые пользователи, прежде чем ответить в теме или создать новую, внимательно ознакомьтесь с правилами раздела
  • Не задавайте глупых вопросов "Посоветуйте какой-нибудь компонент.." Есть JED!!! Ищите там!!!
  • Аналоги ищите там же - на JED!!!
  • Новая версия? - У кого будет - тот выложит!
Статус темы:
Закрыта.
Модераторы: arman29, DMS, NightHunter
  1. Lobo

    Lobo

    Регистр.:
    3 июл 2009
    Сообщения:
    275
    Симпатии:
    2
    В админке сапы сегодня обнаружил ,запрещенные страницы к индексированию.
    На стр. яндекс вебмастер выполнил «Загрузить robots.txt с сайта».
    Затем добавил страницы (7стр) запрещенные к индексированию.
    После проверки перед каждой из этих страниц :
    запрещен правилом
    /*print=1*

    Не пойму как это может быть, эти страницы я добавлял в том же режиме что и остальные.
    Подскажите что и как нужно исправить для того что бы и эти страницы проиндексировались.
     
  2. Sammerset

    Sammerset Постоялец

    Регистр.:
    14 сен 2008
    Сообщения:
    136
    Симпатии:
    10
    На робот.txt взглянуть можно?
     
  3. qazibum

    qazibum

    Регистр.:
    21 окт 2009
    Сообщения:
    200
    Симпатии:
    9
    Это страница для печати ведь.
    Тогда правильно, что закрыто от индексации. Во-первых - дубль контента (если поисковик не склеит), во-вторых если такая страница попадет в выдачу, то посетитель может на нее попасть, на пустую страницу для печати.
     
  4. lancerok

    lancerok Писатель

    Заблокирован
    Регистр.:
    3 окт 2010
    Сообщения:
    6
    Симпатии:
    0
  5. crisscross1

    crisscross1 Создатель

    Регистр.:
    8 апр 2009
    Сообщения:
    22
    Симпатии:
    0
    удали строчку
    Disallow: /*print=1*
    она может и без последней звездочки быть
     
  6. Lobo

    Lobo

    Регистр.:
    3 июл 2009
    Сообщения:
    275
    Симпатии:
    2
    можно:
    Код:
    User-agent: Yandex
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/
    Disallow: /xmlrpc/
    Disallow: /*print=1*
    User-agent: *
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/
    Disallow: /xmlrpc/
    Host: http://site.ru
    Sitemap: http://site.ru/index.php?option=com_xmap&sitemap=1&view=xml&no_html=1
     
  7. slim84

    slim84 Постоялец

    Регистр.:
    28 апр 2008
    Сообщения:
    52
    Симпатии:
    18
    Укажите ещё адреса нескольких страниц запрещенных к индексации.
    Если в урл-е содержится запрещенный параметр "print=1", то как бы все верно.
     
  8. and77st

    and77st Постоялец

    Регистр.:
    23 апр 2008
    Сообщения:
    133
    Симпатии:
    60
    Получается только для User-agent: Yandex вы закрываете доступ к /*print=1*, а для всех остальных роботов User-agent: * доступ остается открытым.
     
Статус темы:
Закрыта.