如何获取100万条查询的网址?

时间:2017-10-04 15:44:36

标签: python-3.x url

我有100万个关键字,我想编写程序,通过神经网络为每个关键字定义类别。要了解我的程序,我需要为每个关键字获取文本(50-100)。要获取文本,我需要通过搜索引擎获取关键字的URL - google,yahoo,bing等。

我如何实时(10-30天)?我所知道的所有搜索引擎都会通过指定Python程序为频繁查询提供禁止(验证码)。

0 个答案:

没有答案