чем напарсить базу доменов?

Тема в разделе "SEO Скрипты", создана пользователем bratok, 29 май 2007.

Статус темы:
Закрыта.
  1. bratok

    bratok

    Регистр.:
    16 ноя 2006
    Сообщения:
    203
    Симпатии:
    47
    чем напарсить базу доменов более 50 тысяч, к примеру?

    при запросе inurl:"com ua" в гугле - можно парсером вытянуть не более 700 url...

    есть идея напарсить с яндекса по запросу domain="ua", но немогу найти нормального парсера, который настроен на новый вид выдачи яндекса

    может кто поможет определиться с запросами, поисковиком для этой цели?
     
  2. General Fizz

    General Fizz Боевой Генерал :)

    Регистр.:
    11 апр 2007
    Сообщения:
    753
    Симпатии:
    396
    Если домены ru или su, то можно скачать их все с контрольной панели Гарант-парк-телекома, если остальные домены - можно подбирать по словарю и проверять скриптом через whois или на наличие ns записей. В общем идея - искать через DNS, тк в поисковиках многие могут быть забанены или склеены.
     
    bratok нравится это.
  3. abc

    abc Прохожие

    нагенери херни типа intext:"слово из словарика" site:com
    по бааальшому словарю, и парси
     
  4. bratok

    bratok

    Регистр.:
    16 ноя 2006
    Сообщения:
    203
    Симпатии:
    47
    спасибо за отзывы ) буду пробывать...

    чем это можно сделать?
     
  5. General Fizz

    General Fizz Боевой Генерал :)

    Регистр.:
    11 апр 2007
    Сообщения:
    753
    Симпатии:
    396
    Кое-что можно сделать Раптором.
     
    bratok нравится это.
  6. bratok

    bratok

    Регистр.:
    16 ноя 2006
    Сообщения:
    203
    Симпатии:
    47
    спасибо) только применение рапртору не нашел :)
     
  7. Rodik

    Rodik Прохожие

    на http://www.hostmaster.net.ua/ есть ссылка List of user's domains требует своего nic-handle, зарегиструруйся там и по-идее получишь доступ ко всем доменам ;)
     
  8. bratok

    bratok

    Регистр.:
    16 ноя 2006
    Сообщения:
    203
    Симпатии:
    47
    Rodik неправда :) получаешь список доменов зарегеный на определенный UANIC только

     
  9. Rodik

    Rodik Прохожие

    тогда попробуй обратится к ним- может быть дадут доступ, verisign например даёт фтп доступ ко всем ccTLD. При обращении приводи в пример их ;)
     
  10. StDutch

    StDutch

    Регистр.:
    18 дек 2007
    Сообщения:
    337
    Симпатии:
    116
    Verisign дает доступ только к com и net (а также root и arpa, но это мало кому надо). А к ccTLD в общем случае доступа нет ни у кого, кроме самого registry и ICANN/IANA.
     
Статус темы:
Закрыта.