如何遍历这个世界上的所有网站地址？

Question

有很多网站使用虚拟主机。在编写爬虫时，即使遍历所有IP，我也无法获得所有站点。

如果ip绑定到多个主机名，例如a.test.com，b.a.test.com。反向dns查找是否会返回所有子域名？

Answer 1

没有。反向查找告诉您控制反向区域的人员想要什么。根据设计，无法找到所有现有域名。