正在做wget尊重机器人合法刮刮？

Question

我正在创建一个数据库作为我项目的一部分，我需要抓取网站的播放器页面（nhl.com）。我计划使用wget，但网站的服务条款表示不允许未经授权的抓取。

我正在做的非法行为是什么？如果是，那么合法的方法是什么？

Answer 1

  

我正在做的非法行为是什么？

是

  

如果是，那么合法的方法是什么？

与NHL交谈。

• 他们可能会给你许可。 （对于学校项目）

• 他们可能会要求您支付许可费。

• 他们可能会说不。如果他们说“不”，那么您需要找到其他数据来源。

或者你可以冒险，忽视合法性......并希望NHL不会决定起诉你。

或者，如果这只是一个学校项目，那么就制作一些想象中的玩家细节。