标签： web web-crawler search-engine
因此，我已经制作了一个基本的搜索引擎和网络搜寻器，并且有了它，因此我插入了一个网站，它将对该网站进行搜寻。我想知道是否有一个URL可以让我爬网整个Internet。那会是Google吗？
谢谢