Получить полную выдачу по запросу в поисковике

Статус
В этой теме нельзя размещать новые ответы.

doxx

|||llll|||||llll|||
Регистрация
18 Фев 2009
Сообщения
1.055
Реакции
212
Требуется получить полную выдачу по определенному запросу в яше и гугле...
т.е. напарсить список сайтов по одному запросу.
Ограничение выдачи под 100 страниц, ~ 1000 результатов... а найдено несколько миллионов ответов... Какие есть варианты получения полной выдачи в поисковике?
 
я знаю один парсёр - BabbloPars 3.0 но он платный...
 
можно с расширенными дорками побалыватьсятипа
inurl:/price/ site:NET
ключ site:NET

и так под все доменные зоны
для гугла самое оно, всё конечно не вытянет но таким образом можно в десятки раз больше собрать нужную базу
 
При парсинге добавляю к запросу наиболее употребляемые слова того языка, на котором идет парсинг, еще, как вариант, можно добавить цифры в запрос, но по мне, так и словаря хватает.
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху