Как найти карту сайта
- Автор темы sinij
- Дата начала
terabass
Старатель
- Регистрация
- 9 Мар 2010
- Сообщения
- 153
- Реакции
- 11
Так значит ее нету...
Сгенерировать можно тут
Сгенерировать можно тут
Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.
-=ber$erk=-
Постоялец
- Регистрация
- 17 Мар 2008
- Сообщения
- 237
- Реакции
- 108
есть софт различный типа sitemapgenerator
вылеченный от жадности в разделе софта
вылеченный от жадности в разделе софта
Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.
vladis1333
Мой дом здесь!
- Регистрация
- 18 Июл 2010
- Сообщения
- 588
- Реакции
- 237
По моему content dowloader спарсит все без карты достаточно указать в ссылках главную страницу (если структура не сложная). и карты строить не надо
IamDevil
Капитан
- Регистрация
- 15 Ноя 2009
- Сообщения
- 246
- Реакции
- 59
Или для скачивания всего сайта(вместе с картой) можно использовать
Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.
Автор имеет в виду, что он не "хочет спарсить сайт", а именно "делает свой парсер сайта".
А вот если бы задача была именно спарсить сайт - тогда да, CD - наилучший из известных мне парсеров...
Безусловно, в вебмастерах яндекса и гугла есть специальные пункты для загрузки sitemap.xml, это помогает роботам проходиться по сайту и эффективнее и быстрее их индексировать...