чем напарсить базу доменов?

[bratok]

чем напарсить базу доменов более 50 тысяч, к примеру?

при запросе inurl:"com ua" в гугле - можно парсером вытянуть не более 700 url...

есть идея напарсить с яндекса по запросу domain="ua", но немогу найти нормального парсера, который настроен на новый вид выдачи яндекса

может кто поможет определиться с запросами, поисковиком для этой цели?

 

[General Fizz]

Если домены ru или su, то можно скачать их все с контрольной панели Гарант-парк-телекома, если остальные домены - можно подбирать по словарю и проверять скриптом через whois или на наличие ns записей. В общем идея - искать через DNS, тк в поисковиках многие могут быть забанены или склеены.

 

[abc]

нагенери херни типа intext:"слово из словарика" site:com
по бааальшому словарю, и парси

 

[bratok]

спасибо за отзывы ) буду пробывать...

нагенери херни типа intext:"слово из словарика" site:com

чем это можно сделать?

 

[General Fizz]

Кое-что можно сделать Раптором.

 

[bratok]

спасибо) только применение рапртору не нашел

 

[Rodik]

на

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

есть ссылка

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

требует своего nic-handle, зарегиструруйся там и по-идее получишь доступ ко всем доменам

 

[bratok]

Для просмотра ссылки Войди или Зарегистрируйся неправда получаешь список доменов зарегеный на определенный UANIC только
Для просмотра ссылки Войди или Зарегистрируйся

 

[Rodik]

тогда попробуй обратится к ним- может быть дадут доступ, verisign например даёт фтп доступ ко всем ccTLD. При обращении приводи в пример их

 

[StDutch]

тогда попробуй обратится к ним- может быть дадут доступ, verisign например даёт фтп доступ ко всем ccTLD. При обращении приводи в пример их

Verisign дает доступ только к com и net (а также root и arpa, но это мало кому надо). А к ccTLD в общем случае доступа нет ни у кого, кроме самого registry и ICANN/IANA.