Бан прокси в гугле

Тема в разделе "Зарубежные поисковики", создана пользователем vtr, 25 сен 2011.

  1. vtr

    vtr

    Регистр.:
    3 янв 2009
    Сообщения:
    193
    Симпатии:
    42
    Парсю запросы с гугла через Amazing Niche Finder. Проблема в том, что гугл начал банить мой ip и блокировать парсинг (раньше такого не наблюдалось), а так же массово банить все прокси, которые я нахожу.
    Вопрос 1:
    Как можно осуществить сейчас парсинг, не нарываясь на бан?
    Вопрос 2:
    Есть какие-то признаки, по которым можно найти гугло-лайк прокси?

    Доп данные: ищу по US|EN, конкуренцию по SOC.
     
  2. Anonymous1

    Anonymous1 Создатель

    Регистр.:
    6 фев 2010
    Сообщения:
    11
    Симпатии:
    2
    Задержка между запросами должна быть > 7000 мс, тогда бана не последует.
     
  3. vtr

    vtr

    Регистр.:
    3 янв 2009
    Сообщения:
    193
    Симпатии:
    42
    Ставлю от 8 секунд и всё равно бан. Вобще без понятия, в чём причина, раньше и с меньшими тайм-аутами всё катило.
     
  4. gts

    gts

    Регистр.:
    12 сен 2010
    Сообщения:
    271
    Симпатии:
    42
    Возможно урл запроса сменился, а прога по старому работает - вот он и банит твой айпишник. а может и по флеш кукам вычисляет тебя.
     
  5. vtr

    vtr

    Регистр.:
    3 янв 2009
    Сообщения:
    193
    Симпатии:
    42
    Урл запроса? Поточнее можно?
    Интересно, как сделать работу AMF незапаливаемой.