可以下载整个Whois数据库/注册域名列表?
我想对注册域名做一些分析。 看起来我可以打whois.internic.net来获取有关每个域的信息,但它看起来像有限制,阻止我做大量的查询。
有没有办法定期(每天说)抓住整个whois数据库? 我真的只关心一个域是否被注册,所以我不需要完整的whois信息。
对于.com
, .net
和.name
,威瑞信提供了TLD区域访问计划 ,您可以申请下载访问区域文件。 其他注册机构通常提供类似的服务。
以下是其他一些TLD的列表(尽pipe我还没有尝试申请其中的任何一个):
-
.org
: https : //pir.org/resources/file-zone-access/ -
.biz
: https : //www.neustar.biz/resources/faqs/domain-name-registry -
.coop
: http :.coop
-
.info
,.mobi
,.pro
: http : //info.info/about/registrant-faqs
Whois API提供主要GTLD(.com,.net,.org,.us,.biz,。mobi等)中的完整whois数据库下载 。
更重要的是,它提供了已parsing和原始格式的历史whois数据库作为CSV文件下载。 我使用了一个公司项目的部分数据库下载(search引擎优化相关),数据质量相当不错。
http://www.whoisxmlapi.com/whois-database-download.php
它还提供每日下载的新注册域名
早在2006年,丹尼斯·福布斯做了一些分析,你可以在这里看到更多的信息。 他还在边栏里提到他得到的数据。 似乎他在查看Verisign区域文件而不是whois数据库。 我不详细,但这可能是另一个方向看。
PremiumDrops将向您销售每月访问主要区域文件(以及更改列表)。
Domainr有一个免费的REST API,你可以使用javascript: