Помощь Левый robots.txt

Тема в разделе "DLE", создана пользователем Rassell, 11 фев 2012.

Информация :
Актуальная версия DataLife Engine 11.1
( Final Release v.11.1 | Скачать DataLife Engine | Скачать 11.1 demo )
Нужно ли обновляться | Как обновиться | Изменения в шаблонах
> Нет русских символов <
[Приватная тема DLE (Все подробности в ЛС к модератору раздела)]

Версии 10.0 и ниже - уязвимы!

Локализации | F.A.Q. | Внешний вид
Правила раздела | Правила форума
Обсуждение хайда карается баном!
В каждом сообщении указывайте версию DLE, которого они касаются!
Модераторы: killoff
  1. Rassell

    Rassell

    Регистр.:
    7 фев 2009
    Сообщения:
    279
    Симпатии:
    42
    Захожу на страницу : http://мой_сайт.ру/robots.txt и там мне выдает:
    User-agent: *
    Disallow: /

    Но у меня нет роботса. Загружаю свой Роботс.тхт, но все равно остается по прежнему User-agent: *
    Disallow: /

    Что это такое ?
    DLE 9.5
     
  2. E-body

    E-body

    Регистр.:
    6 сен 2007
    Сообщения:
    979
    Симпатии:
    315
    гадалки в отпуске. мало информации в вопросе например какой хостинг, какой тариф?
     
  3. Mutant

    Mutant

    Регистр.:
    10 июн 2006
    Сообщения:
    214
    Симпатии:
    71
    Самое простое объяснение - путь по которому вы смотрите этот файл и путь куда заливаете не один и тот же. В конце концов найдите поиском файлы внутри которых содержится текст Disallow: и все станет ясно
     
  4. Rassell

    Rassell

    Регистр.:
    7 фев 2009
    Сообщения:
    279
    Симпатии:
    42
    Путь куда я заливаю файл и где я его смотрю - один и тот же (Soin свидетель, я ему давал доступ к ФТП). Также соин сказал, что это хостер что-то темнит, но хостер все это отрицает. Я думал, что-может дело в движке - установил двиг скачанный с другого места и все осталось как было без изменений ... . Хостер сказал, что сегодня разберется с этим ... .
     
  5. Rassell

    Rassell

    Регистр.:
    7 фев 2009
    Сообщения:
    279
    Симпатии:
    42
    На этом хостинге я уже ставил свои сайты и роботс работал нормально - даже на этом сайте роботс сначала работал (сайт попал в индекс), а сейчас он выпадает из индекса, так как в панелях вебмастера гугла и яндекса написано, что сайт запрещен индексации!
     
  6. Mutant

    Mutant

    Регистр.:
    10 июн 2006
    Сообщения:
    214
    Симпатии:
    71
    Тогда поступи так. Удали на время сайт полностью с хостинга, оставь один единственный файл robots.txt, в него напиши текст "Хостер, урод, сделай так что бы все работало" (текст можно изменять по своему желанию :) ) и сделай запрос http://мой_сайт.ру/robots.txt Если увидишь свой написанный текст, значит все же грабли где то у тебя, если что то другое, то смело пинай хостера. При этом желательно что бы файл там оставался один, дабы хостер не сваливал все на кривость движка или рук.
    Еще можешь положить рядом файл с любым названием, например robot.txt, и запросить его. Посмотри будет ли он нормально отображаться. Если да, то менять такого хостера нужно.
     
  7. sxwer

    sxwer Создатель

    Регистр.:
    9 июн 2011
    Сообщения:
    12
    Симпатии:
    0
    В новых версиях ДЛЕ уже идёт файл роботс. он нормальный или надо что то дополнить?
     
  8. Rassell

    Rassell

    Регистр.:
    7 фев 2009
    Сообщения:
    279
    Симпатии:
    42
    Он нормальный, но при желании можно его дополнить!
     
  9. killoff

    killoff CD тихо, и не DVD меня ;)

    Moderator
    Регистр.:
    13 май 2008
    Сообщения:
    2.015
    Симпатии:
    679
    Вообще посмотри в htaccess нет ли упоминаний про роботс, может сам файл нужный лежит в папке аплоадс или ещё где-нибудь, а не в корне сайта...!?
     
  10. fumofuuu

    fumofuuu

    Регистр.:
    24 сен 2011
    Сообщения:
    279
    Симпатии:
    125
    User-agent: *
    Disallow: /*print
    Disallow: /user/
    Disallow: /backup/
    Disallow: /engine/
    Disallow: /language/
    Disallow: /templates/
    Disallow: /upgrade/
    Disallow: /uploads/
    Disallow: /autobackup.php
    Disallow: /admin.php
    Disallow: /index.php?do=addnews
    Disallow: /index.php?do=feedback
    Disallow: /index.php?do=lostpassword
    Disallow: /index.php?do=pm
    Disallow: /index.php?do=register
    Disallow: /index.php?do=stats
    Disallow: /index.php?do=search
    Disallow: /index.php?subaction=newposts
    Disallow: /?do=lastcomments
    Disallow: /statistics.html
    Sitemap: http://domain.ru/sitemap.xml
    Host: domain.ru


    Была такая проблема в uploads robots.txt Лежал, это Null был кривой