Получить полную выдачу по запросу в поисковике

Тема в разделе "Вопросы новичков", создана пользователем doxx, 18 июн 2012.

Статус темы:
Закрыта.
  1. doxx

    doxx |||llll|||||llll|||

    Регистр.:
    18 фев 2009
    Сообщения:
    1.058
    Симпатии:
    212
    Требуется получить полную выдачу по определенному запросу в яше и гугле...
    т.е. напарсить список сайтов по одному запросу.
    Ограничение выдачи под 100 страниц, ~ 1000 результатов... а найдено несколько миллионов ответов... Какие есть варианты получения полной выдачи в поисковике?
     
  2. zilon

    zilon

    Регистр.:
    30 июл 2011
    Сообщения:
    370
    Симпатии:
    147
    я знаю один парсёр - BabbloPars 3.0 но он платный...
     
  3. Grigirij

    Grigirij $$$

    Регистр.:
    25 сен 2008
    Сообщения:
    699
    Симпатии:
    331
    можно с расширенными дорками побалыватьсятипа
    inurl:/price/ site:NET
    ключ site:NET

    и так под все доменные зоны
    для гугла самое оно, всё конечно не вытянет но таким образом можно в десятки раз больше собрать нужную базу
     
  4. pehota

    pehota

    Регистр.:
    2 апр 2007
    Сообщения:
    359
    Симпатии:
    204
    При парсинге добавляю к запросу наиболее употребляемые слова того языка, на котором идет парсинг, еще, как вариант, можно добавить цифры в запрос, но по мне, так и словаря хватает.
     
Статус темы:
Закрыта.