我希望您不要将我的问题标记为否定，我没有明确的答案，这样可以向多个用户提供反馈，并避免做错事情（如果是这样的话）
我想知道一个在这方面有经验的人的经验。基本上，我必须创建一个提供有关多个汽车经销商信息的网站，并且必须使我的页面集成各种不同的车辆报价，以便我的页面可以进行比较，并且用户可以做出最终决定。
我个人已经告知自己，并且我了解到这是不道德的，但是也有人告诉我，我可以拦截Web服务是合法的，因为它对于存在以下简单事实是免费的云。
您能否告诉我这是否合法，或广为人知？而且，如果这不合法，我应该怎么做才能实现该网页的目的？
注意：我不会使用API，而是直接从某些汽车经销店复制Web服务（我将使用url并发送正确的参数来发送所需的信息。
答案 0 :(得分：0)
您正在谈论抓取/抓取。出于各种原因，这是通过多种方式完成的；例如，搜索引擎对网站进行爬网，以便它们可以对其进行索引。现在，这里的业务案例是，搜索引擎受益于具有较大的索引并能够通过将用户发送到适当的目的地来成功响应查询。这些网站的好处显然是提高了可发现性和流量。更不用说，所有这些都伴随着一个广告网络和平台，搜索引擎和企业都可以从存在和合作中受益。
但是，对于搜索引擎爬网程序，网站所有者负责搜索引擎是否应对其网站进行爬网。他们可以在网站本身上或在搜索引擎管理控制台中的仪表板上设置参数，以防止搜寻器将网站编入索引。
因此，您看到，这里没有简单的，一刀切的答案。但是，您可以考虑以下几个主题，并可以提出一些问题：
您的目标网站是否打开以允许您爬网/爬网它们的内容？首先，请查看其使用条款；有时，他们使用清晰的语言禁止进行任何抓取/抓取/索引编制。如果是这样，请兑现他们的愿望，让他们一个人呆着。
您将为他们提供什么价值？通过汇总他们的内容，您是否可以链接回他们的网站，从而为他们创造一些流量和潜在的业务？您会显示他们想要的归因和品牌以及从他们那里显示的内容吗？如果他们愿意，您会允许他们选择退出吗？
如果不确定，请与他们联系。解释您要做什么，并通过与您的伙伴关系为他们提供明显的好处。如果他们愿意与您合作，请从他们那里获得书面声明，声明您可以按照您和他们同意的方式来抓取和使用其内容。