想要制作搜索引擎

Question

我想创建一个torrent搜索引擎，它将提供指向其他torrent网站的链接。所以我需要来自其他站点的数据来在数据库中对它们进行索引。因此，为此目的抓取网站是否合法，或者还有其他方法可以做到这一点。

Answer 1

根据网站的不同，未经许可不合法。

您可能希望调查Common Crawl，这是一个已经抓取整个网络的网站。查看他们的ToU部分，检查一切的合法性。