萌えハッカーニュースリーダー

2025/11/01 10:51 List of 4.51B Internet Domains

出典: https://cs2.ip.thc.org/RDNS/readme.txt
hakase
博士

ロボ子、大変なのじゃ!2025年10月のDNSレコードデータが公開されたらしいぞ!

roboko
ロボ子

DNSレコードデータですか、博士。それは興味深いですね。どのくらいの規模なのですか?

hakase
博士

なんと、45億1000万件ものレコードがあるらしいぞ!

roboko
ロボ子

それはすごい量ですね!どんな形式で提供されているんですか?

hakase
博士

ParquetとCSV形式みたいじゃな。Parquetファイルは「https://dns.team-teso.net/2025/rdns-oct.parquet.gz」で、CSVファイルは「https://dns.team-teso.net/2025/rdns-oct.csv.gz」からダウンロードできるぞ。

roboko
ロボ子

なるほど。Parquet形式なら、DuckDBで効率的にクエリできそうですね。

hakase
博士

さすがロボ子!DuckDBの使用が推奨されているみたいじゃ。「curl https://install.duckdb.org | sh」でインストールして、「duckdb」で実行できるぞ。例えば、「select * from 'rdns-aug.parquet' where ip_address='1.1.1.1' limit 10」みたいなクエリが使えるみたいじゃな。

roboko
ロボ子

CSVファイルなら、grepコマンドで特定のドメインを検索することもできますね。例えば、「grep -m 10 'thc.org' rdns-oct.csv」のように。

hakase
博士

その通り!それに、API経由でもアクセスできるみたいじゃな。「https://ip.thc.org」で毎日更新されるデータが利用できるらしいぞ。

roboko
ロボ子

毎月末にデータが公開される予定とのことですので、継続的にウォッチできますね。

hakase
博士

そうじゃな。このデータ公開には、DNS/ドメイン/IPデータベースの共有や、サーバー費用の寄付などで貢献できるみたいじゃ。連絡先は「https://thc.org/ops」じゃ。

roboko
ロボ子

寄付も歓迎されているようですね。VATインボイスも発行可能で、銀行振込や暗号通貨で寄付できるみたいです。

hakase
博士

BTCは「bc1qdp6mdje5f9x8ar8jg3uv425d4r2v5cmdygkknz」、ETHは「0xb59fB528BFee42caba4A607AFD13444FB38d0820」、XMRは「85RDZJfdGWX3BzUESZSBNtNicHeTJo3UseYH2Pk6XeW61hFF3JWSax9LkvHZPCYg8pHJfQxCEHfgsFXFWrFNiUVMGzFv9cx」じゃ。

roboko
ロボ子

博士、このデータを使って何か面白い分析ができそうですね。

hakase
博士

例えば、特定のドメインのDNSレコードの変化を追跡したり、怪しいIPアドレスの活動を調査したりできるかもしれんのじゃ。ワクワクするぞ!

roboko
ロボ子

確かに、セキュリティの分野で役立ちそうですね。悪意のあるドメインの特定や、DDoS攻撃の分析などに活用できるかもしれません。

hakase
博士

そうじゃな!ところでロボ子、45億件のデータを扱うって、まるで巨大な迷路みたいじゃな。

roboko
ロボ子

そうですね。迷子にならないように、しっかり地図(クエリ)を用意しないと。

hakase
博士

あはは!ロボ子、うまいこと言うのじゃ!まるで、DNSレコードの海に溺れないように、ライフジャケット(DuckDB)を着るみたいじゃな!

⚠️この記事は生成AIによるコンテンツを含み、ハルシネーションの可能性があります。

Search