https://opennet.dev/openforum/vsluhforumID1/85668.html Всем доброго времени суток!<br><br>Решаю одну исследовательскую задачку, в которой требуется список (не менее 100.000) доменов.<br>Не подскажете где можно скачать базу доменных имен (очень желательно живых)?<br>А еще мне в голову пришла шальная мысль, нельзя ли слить весь кэш доменных имен с DNS сервера?<br><br>Если кто-нибудь сталкивался с подобной задачей - помогите инфой...<br><br>Заранее огромный сенькс!!!<br> https://opennet.dev/openforum/vsluhforumID1/85668.html#11 Sun, 28 Jun 2009 19:18:02 GMT &gt;Зачем же так критично, принцип работы DNS не слишком-то сложен, про кэш <br>&gt;вообще молчу. <br><br>и тем не менее PavelR как обычно прав :)<br><br>&gt;1. Не попадались мне пока "реальные" люди. <br><br>Ну например мне приходилось работать на трех из четырех указанных мной. Другое дело, что моя профессиональная этика мне не позволяет такой информацией делится. <br><br>&gt;2. Как можно сформировать список ВСЕХ СУЩЕСТВУЮЩИХ доменных имен при помощи поисковика, <br>&gt;а??? <br><br>Ваш четвертый пункт. Совсем всех конечно не получится, но хотя бы второго уровня для каких-то tld можно пытаться найти. <br><br>&gt;3. Вообще мало реально, хотя конечно можно при помощи брутфорсера сгенерить список <br>&gt;доменных имен и написать небольшую утилиту проверяющую имя хоста на DNS <br>&gt;сервере на наличие записи. В связи с чем возникают вопросы: <br>&gt;3.1 Время на перебор (какой-нибудь год, два...)? <br><br>Для вашей цифры часы или в худшем случае дни, подробней см. 3.3. Скрипт собственно перебора при знании perl пишется за несколько минут после изучения http://search.cpan.org/~ https://opennet.dev/openforum/vsluhforumID1/85668.html#10 Sun, 28 Jun 2009 03:44:30 GMT <br>&gt;<br>&gt;Зачем же так критично, принцип работы DNS не слишком-то сложен, про кэш <br>&gt;вообще молчу. <br><br>Только вы так и не можете его полностью понять (с учетом особенностей архитектуры).<br> https://opennet.dev/openforum/vsluhforumID1/85668.html#9 Sat, 27 Jun 2009 22:01:02 GMT &gt;[оверквотинг удален]<br>&gt;вы не знаете ни принципов работы DNS, ни значения слова кэш. <br>&gt;<br>&gt;Если вы хотите получить большой список dns записей, не имея dns сервера, <br>&gt;который бы их хранил, то вариантов три: <br>&gt;1. Найти человека, работающего с крупным хостером, регистраром, спамером, анти-спамером итд. И <br>&gt;каким либо образом уговорить его дать вам список доменов из их <br>&gt;БД <br>&gt;2. Воспользоваться поисковиками. <br>&gt;3. Сгенерировать каким-либо образом список потенциальных доменных имен и попытаться все их <br>&gt;отрезолвить для выявления существующих. <br><br>Зачем же так критично, принцип работы DNS не слишком-то сложен, про кэш вообще молчу.<br>1. Не попадались мне пока "реальные" люди.<br>2. Как можно сформировать список ВСЕХ СУЩЕСТВУЮЩИХ доменных имен при помощи поисковика, а???<br>3. Вообще мало реально, хотя конечно можно при помощи брутфорсера сгенерить список доменных имен и написать небольшую утилиту проверяющую имя хоста на DNS сервере на наличие записи. В связи с чем возникают вопросы:<br>3.1 Время на перебор (какой- https://opennet.dev/openforum/vsluhforumID1/85668.html#8 Thu, 25 Jun 2009 14:12:35 GMT &gt;Примерно предствляю, в пределах 50 гигов.<br><br>Любопытно узнать откуда такая цифра<br><br>&gt;никто не хочет поделиться способом получения базы DNS<br><br>Вы сначала вопрос правильно задайте, а уже потом рассчитывайте на адекватную помощь. Совершенно непонятно что вы подразумеваете под "кэш всех DNS записей". Сдается вы не знаете ни принципов работы DNS, ни значения слова кэш. <br>Если вы хотите получить большой список dns записей, не имея dns сервера, который бы их хранил, то вариантов три:<br>1. Найти человека, работающего с крупным хостером, регистраром, спамером, анти-спамером итд. И каким либо образом уговорить его дать вам список доменов из их БД<br>2. Воспользоваться поисковиками. <br>3. Сгенерировать каким-либо образом список потенциальных доменных имен и попытаться все их отрезолвить для выявления существующих. <br><br> https://opennet.dev/openforum/vsluhforumID1/85668.html#7 Wed, 24 Jun 2009 13:09:56 GMT &gt;представляете себе порядок количества _всех_ зон ? <br><br>Примерно предствляю, в пределах 50 гигов.<br>Поскольку мне нужны только имена хостов.<br><br>&gt;<br>&gt;Конечно реально, только вы посильнее постарайтесь... <br><br>Дык я и стараюсь, но никто не хочет поделиться способом получения базы DNS, может быть есть скрипт или утилита при помощи которой можно заполучить вожделенную базу?<br><br> https://opennet.dev/openforum/vsluhforumID1/85668.html#6 Wed, 24 Jun 2009 03:28:38 GMT &gt;[оверквотинг удален]<br>&gt;&gt;<br>&gt;&gt;при этом про chroot не забывайте, если используете. <br>&gt;&gt;настраиваете остальное, запускаете и пусть пользуются. <br>&gt;&gt;потом rndc dumpdb -cache и в cache_dump.db получаете кеш своего DNS. <br>&gt;<br>&gt;В этом случае мы получим кэш локальных DNS запросов. <br>&gt;Я наверное несколько неточно описал мою задачу. <br>&gt;На самом деле думал про кэш всех DNS записей, а если выражаться <br>&gt;еще точнее, в сухом остатке я хотел получить список всех зарегестрированных <br>&gt;имен хостов, во всех зонах. <br><br> Думали про кэш - кэш и получили. Вы хотя бы представляете себе порядок количества _всех_ зон ?<br><br>&gt;Вот что-то подобное реально? <br><br>Конечно реально, только вы посильнее постарайтесь... <br> https://opennet.dev/openforum/vsluhforumID1/85668.html#5 Tue, 23 Jun 2009 22:43:57 GMT &gt;[оверквотинг удален]<br>&gt;&gt;Прошу прощения, можно ли подробнее или реальный пример, я новичек в этом <br>&gt;&gt;деле) <br>&gt;<br>&gt;в named.conf в options пишите куда сбрасывать кеш. <br>&gt;<br>&gt;dump-file "/var/log/cache_dump.db"; <br>&gt;<br>&gt;при этом про chroot не забывайте, если используете. <br>&gt;настраиваете остальное, запускаете и пусть пользуются. <br>&gt;потом rndc dumpdb -cache и в cache_dump.db получаете кеш своего DNS. <br><br>В этом случае мы получим кэш локальных DNS запросов.<br>Я наверное несколько неточно описал мою задачу.<br>На самом деле думал про кэш всех DNS записей, а если выражаться еще точнее, в сухом остатке я хотел получить список всех зарегестрированных имен хостов, во всех зонах.<br>Вот что-то подобное реально?<br><br><br> https://opennet.dev/openforum/vsluhforumID1/85668.html#4 Fri, 19 Jun 2009 16:49:04 GMT &gt;[оверквотинг удален]<br>&gt;&gt;со своего можно. <br>&gt;&gt;в bind - rndc dumpdb -cache с последующей доработкой , например <br>&gt;&gt;<br>&gt;&gt;&gt;<br>&gt;&gt;&gt;Если кто-нибудь сталкивался с подобной задачей - помогите инфой... <br>&gt;&gt;&gt;<br>&gt;&gt;&gt;Заранее огромный сенькс!!! <br>&gt;<br>&gt;Прошу прощения, можно ли подробнее или реальный пример, я новичек в этом <br>&gt;деле) <br><br>в named.conf в options пишите куда сбрасывать кеш. <br><br>dump-file "/var/log/cache_dump.db";<br><br>при этом про chroot не забывайте, если используете.<br>настраиваете остальное, запускаете и пусть пользуются.<br>потом rndc dumpdb -cache и в cache_dump.db получаете кеш своего DNS.<br> https://opennet.dev/openforum/vsluhforumID1/85668.html#3 Fri, 19 Jun 2009 15:00:32 GMT &gt;[оверквотинг удален]<br>&gt;&gt;А еще мне в голову пришла шальная мысль, нельзя ли слить весь <br>&gt;&gt;кэш доменных имен с DNS сервера? <br>&gt;<br>&gt;со своего можно. <br>&gt;в bind - rndc dumpdb -cache с последующей доработкой , например <br>&gt;<br>&gt;&gt;<br>&gt;&gt;Если кто-нибудь сталкивался с подобной задачей - помогите инфой... <br>&gt;&gt;<br>&gt;&gt;Заранее огромный сенькс!!! <br><br>Прошу прощения, можно ли подробнее или реальный пример, я новичек в этом деле)<br>