передрать сайт

Тема в разделе "PHP", создана пользователем kay05, 20 мар 2008.

Статус темы:
Закрыта.
Модераторы: latteo
  1. kay05

    kay05 Создатель

    Регистр.:
    31 май 2007
    Сообщения:
    19
    Симпатии:
    2
    не знаю в этот ли раздел мой вопрос..
    есть сайт производителя с обильным каталогом картинок товаров, нужно сделать базу данных картинок для своего сайта. ходить по ссылкам и сохранять забодаюсь. мож какие скрипты есть, которые все по полочкам разложат у меня на диске?
     
  2. ozware

    ozware

    Регистр.:
    22 апр 2007
    Сообщения:
    327
    Симпатии:
    42
    универсальных скриптов не бывает,
    скорее всего придется писать скрипт, заточенный под парсинг конкретного сайта
     
  3. Лариса

    Лариса Читатель

    Заблокирован
    Регистр.:
    21 сен 2007
    Сообщения:
    390
    Симпатии:
    128
    1.парсер или граббер на заказ
    2. РИП нужного сайта (для инфы)
    3. Поискать среди слитых БД
    4. Партнерка
     
  4. lobzik

    lobzik

    Регистр.:
    8 авг 2006
    Сообщения:
    311
    Симпатии:
    49
    Готового под конкретный сайт не найдешь...
    Кидай урл и описание того, что надо забрать и куда/как положить =)
     
  5. kay05

    kay05 Создатель

    Регистр.:
    31 май 2007
    Сообщения:
    19
    Симпатии:
    2
    детальней по каждому пункту можно, если не затруднит?
     
  6. ArtFun

    ArtFun Постоялец

    Регистр.:
    6 фев 2008
    Сообщения:
    139
    Симпатии:
    21
    Из десктопных программ, насколько я знаю, Teleport Pro хорошо справляется с этой задачей.
    Но вот со скриптом, для такой задачи, действительно сложно.
     
  7. ZCFD

    ZCFD

    Регистр.:
    16 янв 2008
    Сообщения:
    989
    Симпатии:
    437
    что бы не парится с рекурсией используй простой вызов системных утилит из своего скрипта

    man wget тебе в помощь
     
  8. Лариса

    Лариса Читатель

    Заблокирован
    Регистр.:
    21 сен 2007
    Сообщения:
    390
    Симпатии:
    128
    извиняюсь, я была невнимательна.
    оказывается речь идет только о картинках..
    Мне по привычке, подумалось о большем.

    Ты говоришь, что картинок много. А ты продумал, куда ты их будешь девать? тупо слить (т.е. мехаически) в одну папку на свой локал?

    Тогда, если позволяет сеть и не хочешь никого просить бери прогу типа Teleport, которая выкачает тебе все.

    если в свой новый сайт, то будет двойная работа. Тогда нужен парсер...ммм..который в нужном месте возьмет и в нужное место положит.автоматически) если по-простому...

    Об остальном умолчу:)
     
  9. muzshura

    muzshura Постоялец

    Регистр.:
    27 фев 2008
    Сообщения:
    74
    Симпатии:
    3
    Можно поставить снифер и походить по этому сайту, записать и отметить для себя процесс получения картинки, потом или во время этого процесса вам нужно будет воссоздать этот процесс с помощью php и curl. То есть к примеру скриптом получаешь главную страницу, ищешь ссылки на товарные позиции, получаешь таблицу ссылок, проходишь по каждой, парсишь имя позиции, парсишь картинки, заружаешь результат к себе в mysql базу.
     
  10. xorbit13

    xorbit13 Создатель

    Регистр.:
    9 фев 2008
    Сообщения:
    41
    Симпатии:
    10
    слить контент с сайта можна Portable Offline Browser указывать подуровни, можна слить все или выборочно.. :ay:
     
Статус темы:
Закрыта.