Детальная статистика бота яндекса

Тема в разделе "Вопросы новичков", создана пользователем yehoo, 19 май 2009.

Статус темы:
Закрыта.
  1. yehoo

    yehoo Создатель

    Регистр.:
    27 окт 2008
    Сообщения:
    17
    Симпатии:
    0
    Нужна максимальная статистика по действиям бота яндекса. А именно
    1 порядок посещения страниц
    2 какие файлы загружает и когда (css, xml, картинки, js ...)\
    Статистика нужна по времени, тоесть по порядку как работает бот например грузит индекс.хтмл, потом все картинки, потом js, потом переходит по какойто именно ссылке из индекс хтмла и с какого именно ип все это происходит. Вообще как отследить все запросы к веб серверу ибота? Есть ли готовые решения или как это реализовать?
     
  2. joefast

    joefast

    Заблокирован
    Регистр.:
    6 ноя 2007
    Сообщения:
    464
    Симпатии:
    74
    Есть логи сервера, в которых пишется кто, когда и что запрашивал. Чем они вас не устраивают?
     
  3. Piranha

    Piranha

    Регистр.:
    1 дек 2008
    Сообщения:
    534
    Симпатии:
    69
    Либо юзай сервис пак, либо на серче чел крутой скрипт продает, там все что тебе надо есть (ну почти все) ;) либо стучись в асю

    это первое что надо отключать, иначе просто напросто боты и юзеры сожрут ваш жесткий диск на серваке, мне так однажды за день на гиг засрали, а хостер начал мне за денежку тутже подсовывать свободного места, я как увидел аж присел ))))
     
  4. yehoo

    yehoo Создатель

    Регистр.:
    27 окт 2008
    Сообщения:
    17
    Симпатии:
    0
    Из сервис пака совсем не то, как и "серче чел". Возможно в пхп генерировать css, xml, js с кодом скриптов и перенаправление сделать, но это геморно и с картинками не получится.
    Как логи сервера можно писать только для определенного User-Agent'а?
     
  5. MegO

    MegO Постоялец

    Регистр.:
    13 фев 2009
    Сообщения:
    130
    Симпатии:
    13
    Не слышал такого. Можно скрипт по крону запускать, который из логов будет доставать запросы бота, записывать их в файл а лог очищать. Допустим раз в час.
     
  6. oraculseed

    oraculseed Постоялец

    Регистр.:
    1 янв 2009
    Сообщения:
    152
    Симпатии:
    10
    ну а ротацию логов что отменили ? =D

    ТС - мил человек а вам что надо серверную тулзу ? или скрипт-плагин к сайту ? или анализатор логов ? или все вместе сразу и много ?
     
  7. yehoo

    yehoo Создатель

    Регистр.:
    27 окт 2008
    Сообщения:
    17
    Симпатии:
    0
    Вобщем то я и спрашиваю что даст максимально подробную статистику.
    Думаю анализатор-логов сервера самое оно будет:)
    Только
    Может есть у кого скрипт на пхп анализатора логов, я разберусь и под себя переделаю.
     
  8. Piranha

    Piranha

    Регистр.:
    1 дек 2008
    Сообщения:
    534
    Симпатии:
    69
    сервак пишит тоже самое что и скрипт СП (только в сп можно выставить ограничение по юзер агенту) и тот что чел на серче продает (только более удобный серверный вариант анализирующий в одном месте все твои домены).
     
  9. oraculseed

    oraculseed Постоялец

    Регистр.:
    1 янв 2009
    Сообщения:
    152
    Симпатии:
    10
    дайте ссылку на чела в серче раз вы так бойко его рекламите =), и мне хорошо и создателю темы к размышлению
     
  10. Piranha

    Piranha

    Регистр.:
    1 дек 2008
    Сообщения:
    534
    Симпатии:
    69
    да при чем здесь реклама, просто ТС походу сам не понимает что ему надо...
    http://forum.searchengines.ru/showthread.php?t=346252
     
    oraculseed нравится это.
Статус темы:
Закрыта.