[Помощь] Помогите спарсить интернет магазин

[dvd_xaker]

Есть интернет магазин shop_._firma-gamma_._ru_.
Никак не могу понять как его спарсить Content Downloader.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[smithws]

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[dvd_xaker]

В том и проблема при сдергивание ссылок с сайта он выдает всего лишь около 500... это проблема номер один!

 

[thoth777]

В том и проблема при сдергивание ссылок с сайта он выдает всего лишь около 500... это проблема номер один!

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

яндекс в помощь же

 

[zzallexx]

яндекс в помощь же

яндекс больше 1000 все равно не отдаст

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

 

[dvd_xaker]

*** скрытое содержание ***
яндекс в помощь же

Спасибо за решение. Это пробовал уже тока по другому...
Это страница чисто товара и здесь нету категории откуда товар. Выдрать чисто 5-6к товара без категорий можно конечно но сами понимаете сидить потом разносить по категориям проблематично.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Добавлено через 1 минуту

*** скрытое содержание ***

В старой версии нету доп параметров + изображений доп параметров. Точнее есть но без изображений параметров то есть цветовой гаммы. И причем к сожалению у каждого цветовая гамма свой(точнее их несколько гамм на разные категории, не у всех показано((()
Поэтому приходиться именно новой пользоваться

Хотя старую посмотреть парсер уже более 11к выдал. ЕСли будут еще вопросы напишу)

 

[thoth777]

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

ищете все на букву а
потом б
потом в
и так далее

парсите поиск

 

[dvd_xaker]

Решил парсить старую версию.
Думал все норм но тут увидел интересные ссылки)

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

То есть типа разные модификации товара не влазят на страницу)
и добавляется обычный параметр start=20.
Терь вопрос как при парсинге проверить если 2 страница или нет и если есть открыть ее и добавить параметры к предыдущему?

У некоторых вообще несколько страниц

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

По поводу парсинга поиска не вижу целесообразности. Так как будет прилично дублежа товара 100%.

 

[thoth777]

По поводу парсинга поиска не вижу целесообразности. Так как будет прилично дублежа товара 100%.

артикул товара уникален же
по нему и группируйте.

 

[dvd_xaker]

В принципе спарсил все товары получилось больше 12к но это со страницами параметров.
Все норм дальше идет. Только реально пока не пойму как спарсить в одну и туже группу определенного товара 2 и последующие страницы.
Применять GetMoreContent?
По поводу артикула: там у 40% товара вообще его нет)