Защита от парсинга

Тема в разделе "Мегафлуд", создана пользователем sarootua, 29 авг 2015.

  1. sarootua

    sarootua

    Регистр.:
    24 окт 2013
    Сообщения:
    230
    Симпатии:
    214
    Всем привет, подскажите, если ли скрипты, которые могут помочь защитить контент от парсинга товаров в магазине или хотя бы усложнить работу парсера
     
  2. meromax

    meromax Постоялец

    Регистр.:
    19 янв 2013
    Сообщения:
    141
    Симпатии:
    16
    Очень мало вероятно.
    Потому что сейчас парсеры почти как живые люди
    А запретить человеку просматривать ваши товары нереально
     
  3. sarootua

    sarootua

    Регистр.:
    24 окт 2013
    Сообщения:
    230
    Симпатии:
    214
    Да, согласен, возможно на уровне фаервола или еще чем то
     
  4. meromax

    meromax Постоялец

    Регистр.:
    19 янв 2013
    Сообщения:
    141
    Симпатии:
    16
    не поможет :))
    я сам парсингом занимаюсь под заказ, и пока за 4 года не было ни одного сайта который не смогли бы спарсить
    бывали только те, у которых геморное тз было и мы отказывалис но не более
     
  5. sarootua

    sarootua

    Регистр.:
    24 окт 2013
    Сообщения:
    230
    Симпатии:
    214
    стучись в скайп sarootua - обсудим
     
  6. zhekaxak

    zhekaxak Нарушитель

    Регистр.:
    16 авг 2007
    Сообщения:
    286
    Симпатии:
    67
    как вариант:
    ставить на картинки водянные знаки, мало кто захочет размещать такие картинки у себя, а удалять их гемморно...
    в описаниях писать фразы типа покупайте в нашем магазине (адрес магазина), в разных местах, словоформах и т.п., автоматом будет трудно убрать, а в ручную морочится долго...
    идея в том, чтобы никто не захотел парсить, так как контент в том виде будет непригоден для других сайтов

    ну а всякие скрипты вряд ли помогут, баны по айпи, подгрузка контента, защита от копирования обходится без проблем
     
    Jusper1 нравится это.
  7. meromax

    meromax Постоялец

    Регистр.:
    19 янв 2013
    Сообщения:
    141
    Симпатии:
    16
    картинки - сейчас не так уж и дорого нанять фрилансера на то что бы перезалили картинки, дешевле чем залить товар с нуля
    описалово - удаляется одним махом в експорте, или даже при парсинге

    если уже придумали способ парсинга контактов на таких площадках как Olx slando aukro и т.д. ...
     
  8. Festem

    Festem Постоялец

    Регистр.:
    4 сен 2014
    Сообщения:
    97
    Симпатии:
    26
    А можно с помощью htaccess переадресовывать определенные айпи на страницу типа "сайт недоступен"? дело в том что какие-то школьники взялись видимо парсить сайт и работают с 1 айпи. не думаю что они будут юзать проксю.
     
  9. Jusper1

    Jusper1 Постоялец

    Регистр.:
    27 фев 2015
    Сообщения:
    106
    Симпатии:
    44
    Как в таком случаи яндекс маркет эффективно защищается?
    Парсинг ведь отличается тем, что кол-во обращений к сайту идет с одного айпи с фиксированной задержкой, на протяжении опред (долгого) времени. Касательно прокси, то их можно пачкой в бан отправить
     
  10. animal_x

    animal_x

    Регистр.:
    22 июн 2012
    Сообщения:
    400
    Симпатии:
    127
    Так можно
    Код:
    RewriteEngine on
    
    RewriteCond %{REMOTE_ADDR} (127.0.0.1|127.0.0.20)
    RewriteRule .* http://www.gogle.com/ [R=301,L]