[Помогите] robots.txt для Wordpress: делитесь опытом

Тема в разделе "Wordpress", создана пользователем antifilter, 6 окт 2008.

Статус темы:
Закрыта.
Модераторы: Sorcus
  1. antifilter

    antifilter

    Регистр.:
    25 сен 2007
    Сообщения:
    302
    Симпатии:
    138
    Кто как составляет robots.txt для Wordpress?
    Что обычно закрываете от индексации?
    Ну... и прочие нюансы и, конечно, мысли...
     
  2. sw04

    sw04 seoplayer

    Регистр.:
    1 дек 2007
    Сообщения:
    601
    Симпатии:
    193
  3. Nezzar

    Nezzar

    Регистр.:
    29 дек 2006
    Сообщения:
    338
    Симпатии:
    71
    wp-login.php
    xmlrpc.php
    feed

    Впринципи, остальное не стоит закрывать. У меня на блогах везде блог <--more--> используется, поэтому с помощью архивов, категорий, тэгов я увеличиваю количество страниц, с практически уникальным контентом :D
     
    antifilter нравится это.
  4. BFox

    BFox

    Регистр.:
    11 янв 2008
    Сообщения:
    368
    Симпатии:
    65
    я вот так прописал себе:
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /trackback
    Disallow: /feed
    Disallow: /comments
    Disallow: */trackback
    Disallow: */feed
    Disallow: */comments

    ну и плюс свои файлы
    например файл редиректа
     
    Golosa нравится это.
Статус темы:
Закрыта.