Парсер сохраненных страниц google

Тема в разделе "Как сделать...", создана пользователем erigins, 7 сен 2015.

Метки:
  1. erigins

    erigins Постоялец

    Регистр.:
    19 сен 2010
    Сообщения:
    83
    Симпатии:
    16
    Кто-нибудь занимался парсингом кэша google?



    Вот скриптик


    Скачивал с помощью WinHTTrack
    Google - забанил где-то на 10 странице..
    Сколько нужно прокси - чтобы выкачать 100к страниц?
     

    Вложения:

    • 1.zip
      Размер файла:
      1 МБ
      Просмотров:
      5
    Последнее редактирование: 8 сен 2015
  2. usasoft

    usasoft

    Регистр.:
    9 янв 2008
    Сообщения:
    200
    Симпатии:
    107
    считай 1 прокси - 1 запрос, вполне реально на best-proxies выкачать, самый дешевый вариант)
     
    erigins нравится это.