标签: google-search
我希望从Google搜索结果中下载网址列表。基本上我有一个搜索查询'网站:www.mywebsite.com'这将返回6,500个结果。我需要所有这些结果的网址。我知道有很多方法可以获得前1000个(这是谷歌的限制),但我需要所有6,500个结果。
有没有办法做到这一点,如果有,怎么做?可以通过Google的CustomSearch API完成吗?
对此的任何帮助将不胜感激。