определить роботов поисковиков по ip

[serg122]

Нужны определять по ip если на сайте робот поисковик или обычный посетитель. Есть готовые решения в виде php скрипта? или база данных ip всех поисковиков?

 

[smalllamer]

Актуальную базу IP ботов в паблике не найдешь. А то что есть будет давать результат хуже чем по юзерагенту.

<?PHP
 
$bot = 'Unknown';
 
if (stristr($_SERVER['HTTP_USER_AGENT'], 'Yandex')){ $bot='Yandex';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'YandexBot')){ $bot='YandexBot';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'Yandex')){ $bot='Yandex';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'YandexDirect')){ $bot='Yandex Direct';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'Googlebot')){$bot='Googlebot';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'Google')){$bot='Google';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'Mediapartners-Google')){$bot='Mediapartners-Google (Adsense)';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'Slurp')){$bot='Hot&nbsp;Bot&nbsp;search';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'WebCrawler')){$bot='WebCrawler&nbsp;search';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'ZyBorg')){$bot='Wisenut&nbsp;search';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'scooter')){$bot='AltaVista';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'StackRambler')){$bot='Rambler';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'Aport')){$bot='Aport';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'lycos')){$bot='Lycos';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'Yahoo')){$bot='Yahoo';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'WebAlta')){$bot='WebAlta';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'yahoo')){$bot='Yahoo';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'msnbot')){$bot='msnbot/1.0';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'ia_archiver')){$bot='Alexa search engine';}
else if (stristr($_SERVER['HTTP_USER_AGENT'], 'FAST')){$bot='AllTheWeb';}
 
if($bot != 'Unknown')
{
$dt=date('Y-m-d [H:i:s]'); // получение текущего времени
$fp = fopen('log.html',a); // получаем дескриптор открытого файла
fwrite($fp,'< br>'.$bot.' | '.$dt); // пишем в лог-файл наши данные
fclose($fp); // закрываем дескриптор
}
?

 

[Gorin]

Если это не под рунет, то заморачиваться с ip всех поисковиков не имеет смысла, львиную долю трафика дает гугл. Некоторые суровые люди остальных ботов просто в роботсе запрещают, чтобы зря сервера не напрягали.

 

[poikl]

скрипт с базой ипов можно юзать совместно с тем что выше

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[serg122]

скрипт с базой ипов можно юзать совместно с тем что выше

Там написано By: a guest on Jul 19th, 2012 но все же база новая или на основе 2007?

 

[poikl]

это я запостил )) 19 числа туда
вопрос не правильный , правильный рабочая или нет
ответ да рабочая
сам с ней работаю и скрипт который на верху не юзаю раньше с ним связка была , но по нему тебя спалят если задут с гугли агентом а тут прописываш свой ип и не кто кроме ботов и тебя не видит реального содержания
То ко под яндекс я не уверн так как эта база под запад

 

[xumukys]

Когда-то использовал для клоакинга вот этот сервис:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

На ру сайтах раньше работал, проверял кеш страниц в яндексе и гугле.

 

[baddan]

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[olegapro]

ip bots гугли

 

[olllg]

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.