使用特定網域後綴檢索網站

Question

我有興趣找到儘可能多的具有我感興趣的域名後綴的域名，例如：「.com」，「.net」，「.org」，等

我試圖抓取谷歌，但它明顯不合法，很難做到。

是否存在與域名大的列表？如果沒有，我如何才能使抓取工具儘可能找到以給定域名後綴結尾的域名？

Answer 1

CommonCrawl最近宣佈發佈[排名的主機列表] [2]（總共385M），您可以通過域名後綴進行過濾。