如何在谷歌搜索并解析网址后获取搜索结果页面源?

时间:2012-04-27 16:42:50

标签: php python ruby

如果我在谷歌搜索关键字,我会得到很多结果。 我需要获取该结果的页面源。 然后我需要解析它以获得实际的URL。 我怎么能这样做?

但如果我看到搜索结果页面的页面来源,我发现它只是javascript。

我需要实际的页面源和来自数千个结果的实际网址/链接。

我无法理解这一点,(PHP) How to parse URLs in google search results?

1 个答案:

答案 0 :(得分:1)

试试这个:https://developers.google.com/custom-search/v1/overview。这是他们的自定义搜索API。尽可能尝试使用公司提供的API,而不是抓取他们的页面。

相关问题