Ищу Универсальный парсер сайтов

Тема в разделе "Open Source", создана пользователем Scaltro, 23 янв 2012.

Модераторы: Amazko, Aste
  1. Scaltro

    Scaltro

    Регистр.:
    15 сен 2007
    Сообщения:
    1.092
    Симпатии:
    75
    Подскажите пожалуйста, существует ли скрипт, что то на подобии анонимайзера, ставишь его себе на хост, указываешь какой сайт копировать в настройках и на твоём домене копия сайта? Чтобы как будто для сайта просто появлялся альтернативный домен.
     
  2. prof.seo

    prof.seo Постоялец

    Регистр.:
    25 мар 2009
    Сообщения:
    60
    Симпатии:
    20
    если сайт который надо сграбить статичный на html, то возможно скриптом сделать точную копию.
    если динамичный, на php, то врядли. контент то спарсить получиться но это будет далеко не копия сайта.
    об универсальности в данном случае речи идти не может, под каждый отдельный сайт подпиливать придется
     
  3. Scaltro

    Scaltro

    Регистр.:
    15 сен 2007
    Сообщения:
    1.092
    Симпатии:
    75
    Зачем было бы подпиливать, если скрипт бы заливал на хостинг копию определённой страницы сайта и отображал у себя уже из директории, или что то типа wrapper как был раньше в Joomla 1.0 такой модуль, только чтобы видно в исходнике небыло что скрипт парсит тот или иной сайт.
     
  4. dvd_xaker

    dvd_xaker Постоялец

    Регистр.:
    27 сен 2011
    Сообщения:
    132
    Симпатии:
    14
    Ну если уже совсем упросить задачу и сделать копию сайта чисто в HTML то с помощью обычного линукса мона залить сайт и в определенную директорию с помощью WGET
    вот почитайте про команды http://ru.wikipedia.org/wiki/Wget. Раньше сливал целиком сайт с помощью его и делал себе походные CHM)))
     
  5. prof.seo

    prof.seo Постоялец

    Регистр.:
    25 мар 2009
    Сообщения:
    60
    Симпатии:
    20
    возможно, я не правильно выразился и как следствие ты меня не правильно понял..
    если тебе надо копировать html сайты, то можно написать скрипт который будет копировать сайт на твой хост. в итоге получишь копию сайта.
    если пхп, то чтоб поиметь копию сайта у себя, придется подпиливать под каждый сайт который надо будет сграбить..
    если надо только отдельные страницы - то тут проще, но опять же, если страницы пхп то читай выше
     
  6. Scaltro

    Scaltro

    Регистр.:
    15 сен 2007
    Сообщения:
    1.092
    Симпатии:
    75
    Надо то больше имитацию что у сайта есть второй альтернативный домен.
     
  7. TopReseller

    TopReseller

    Регистр.:
    30 июл 2011
    Сообщения:
    283
    Симпатии:
    89
    есть такое, на днях я приобрел подобный скрипт за 10000 рублей
    могу дать ссылку в личку если требуется
     
  8. dmx

    dmx

    Регистр.:
    22 июн 2011
    Сообщения:
    662
    Симпатии:
    526
    Это что ещё за зверь такой ? Можно демо посмотреть :eek:
     
  9. Scaltro

    Scaltro

    Регистр.:
    15 сен 2007
    Сообщения:
    1.092
    Симпатии:
    75
    Конечно требуется, а то как же я NULL то буду искать? :D
     
  10. Avalanch

    Avalanch ТоЛеГ & ТоПеГ

    Регистр.:
    9 янв 2007
    Сообщения:
    1.136
    Симпатии:
    524
    Ссылку в топике оставляйте, надеюсь это не Ваш продукт, а то за рекламу услуг предупреждение получите.