如何使用python收集给定主题的信息?

时间:2017-04-25 20:59:18

标签: python python-3.x web-crawler scrapy-spider bigdata

例如,我有兴趣收集特定NBA球员的每日信息。

据我所知谷歌不允许刮取结果。 Google是否为机器查询提供了其他可能性?它们是用于执行这些查询的Python包吗?

1 个答案:

答案 0 :(得分:1)

大多数搜索引擎都不希望你刮取他们的结果,但他们确实提供了替代方案:

  • Google自定义搜索
  • Google快讯
  • Bing API

还有一些服务可以销售您想要的内容。在我的头顶,我知道:

  • BrightPlanet公司
  • Webhose

(我并不隶属于其中任何一种,但我过去曾使用过所有这些内容。)