[Помогите] Просветите по поводу index,follow

Тема в разделе "Wordpress", создана пользователем alexblack22, 28 янв 2015.

Модераторы: Sorcus
  1. alexblack22

    alexblack22 Создатель

    Регистр.:
    7 окт 2014
    Сообщения:
    11
    Симпатии:
    2
    Здравствуйте!
    Интересует вот такая вещь, подсмотрев у других похожих сайтов на вордпресс, я на своем сайте вручную в хедере прописал <meta name="robots" content="index,follow" />.

    Но на некоторые разделы я с помощью Yoast SEO сделал noindex, например, на результат поиска.
    Но в исходном коду на "результатах поиска" в хедере содержится и мой тег, и yoast'овский.

    Собственно правильно ли сделал? Плохо, что на странице два мета роботса, index и noindex? Может вообще не страдать фигней и убрать мой из хедера?
    Спасибо за подсказки.
     
  2. ddn128

    ddn128

    Регистр.:
    31 июл 2013
    Сообщения:
    388
    Симпатии:
    172
    зачем такие "изыски", если есть robots.txt?
     
    alexblack22 нравится это.
  3. igorenia

    igorenia Постоялец

    Регистр.:
    12 окт 2013
    Сообщения:
    92
    Симпатии:
    66
    От "index,follow" пользы не будет, это и так значение по-умолчанию.
     
    alexblack22 нравится это.
  4. alexblack22

    alexblack22 Создатель

    Регистр.:
    7 окт 2014
    Сообщения:
    11
    Симпатии:
    2
    Спасибо за советы, действительно robots.txt достаточно для указаний роботам.
     
  5. mishanya.yakim

    mishanya.yakim

    Регистр.:
    8 дек 2013
    Сообщения:
    207
    Симпатии:
    68
    сейчас вообще каждый поисковик работает по своей схеме, лучше смотреть их работу и под каждый строить отдельно раздел в роботс
     
  6. haptic

    haptic Создатель

    Регистр.:
    26 янв 2015
    Сообщения:
    27
    Симпатии:
    5
    Nofollow can be inserted by adding rel=”nofollow” in an active link. In most CMS/Content Management Systems you can set it in your WYSIWYG editor when inserting an active link.




    Nofollow can also be implemented using a meta tag. You can see an example below.




    This was, in fact, the original form of Nofollow, but because it blacked out an entire page it proved to be less adaptable and useful than an attribute which could be added to links individually.

    Disallow: (Robots.txt)
    Robots.txt is your website’s gatekeeper.

    It’s found in the root of your website and it’s directives trump all others.

    You should use Disallow if there are entire folders on your website that need to be screened off. And especially if they haven’t been indexed before.

    When you create a Disallow in your robots.txt you tell search engines that they shouldn’t crawl the relevant page or folder.

    You can even block for your entire website but this doesn’t mean that the page won’t be indexed.

    If your page continues to show up on Google’s index you can use Google Webmaster Tools to request that it be removed again. If, that is, you insist on using robots.txt for the purpose.

    If you combine both Disallow and Noindex the latter will be ignored because your Disallow command has already told search engines that they may not look at the page.

    That’s why it’s superfluous to use these two tags in conjunction. If you want to be absolutely sure that your URL isn’t indexed by search engines then use Noindex and nothing else.

    Using Disallow on already indexed pages, for example those with incoming links, means you lose the value which would otherwise have been passed on to the benefit of other pages on your website.

    This is why I strongly recommend you use Noindex instead, whenever possible.

    If you link internally to pages which are disallowed in your robots.txt you waste your internal Pagerank.

    Examples of disallow commands


    Disallow: /folder-we-dont-want-to-show/
    Disallow: /file-we-dont-want-to-show.html
    Allow: /folder-we-dont-want-to-show/single-file-we-want-to-show-from-folder.html


    (Allow is supported by Google, but not by all search engines)

    Noindex
    A Noindex tag tells search engines that the relevant page should not be indexed in their search results.

    If you haven’t added a Nofollow to the tag, however, search engines will still follow all the links on the page.

    In other words, the page will be read by search engines but it won’t be indexed.

    If you don’t want search engines to follow links on your page you need to add a Nofollow to the command.




    Don’t index, but follow links.




    Don’t index and don’t follow links.

    The advantage of not using Nofollow with Noindex is that Pagerank can flow through the Noindex and continue on to the pages which are linked to. This can’t happen when you combine with a Nofollow attribute.
     
  7. Severk

    Severk Писатель

    Регистр.:
    10 дек 2014
    Сообщения:
    1
    Симпатии:
    0
    Создайте лучше специально robots.txt под яндекс и google.
    Я думаю так лучше будет.
     
  8. haptic

    haptic Создатель

    Регистр.:
    26 янв 2015
    Сообщения:
    27
    Симпатии:
    5
    "Create better robots.txt specifically for Yandex and google.
    I think it's better to be. "


    the friend asked, how to make it.


    All people know its for SEO
     
  9. KoNnY

    KoNnY Постоялец

    Регистр.:
    14 дек 2014
    Сообщения:
    68
    Симпатии:
    5
    Конфликта index и noindex не будет. Но зачем это специально прописывать "вручную" в коде? Для открытия сайта для индексации достаточно перейти в Настройки -> Чтение -> Видимость для поисковых систем и снять галочку, если он там стоит.
     
  10. Main_kampf

    Main_kampf Писатель

    Регистр.:
    10 фев 2015
    Сообщения:
    14
    Симпатии:
    0
    Почитай о приоритетности тегов index и noindex одноврменно размещенных на одной странице: это не вредно, просто index приоритетней и страница будет индексироваться.
    Вообще, в роботс.тхт всегда проще блокировать статичные страницы, разделы, вложения.
    А непосредственно тегом noindex я блокирую динамические урлы, поисковую выдачу, и вообще все, что лень блокировать дописывая строки в робатсе)