使用谷歌api获取谷歌搜索点击次数

时间:2017-05-26 10:06:45

标签: api jsoup google-crawlers

我正在尝试使用custum搜索引擎获取搜索结果的数量。我尝试了以下代码:

    String charset = "UTF-8";
    String google = "https://www.googleapis.com/customsearch/v1?key={mykey}" +
                "&cx={mycxcode}&q=" +URLEncoder.encode(searchString, charset) +
                ")&fields=queries(request(totalResults)";
    String userAgent = "Mozilla/5.0 (Windows; U; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 2.0.50727)";
    String totalResultsElementText = Jsoup.connect(google).userAgent(userAgent).ignoreContentType(true).get().text();

对于此代码,我收到以下错误消息: org.jsoup.HttpStatusException:HTTP错误提取URL。状态= 400,网址= {myurl}

我做错了什么?

1 个答案:

答案 0 :(得分:1)

您正在创建的网址有错误。您应该将参数fields更改为

&fields=queries/request(totalResults),因为requestqueries的字段,但不是数组。

可以找到有关部分选择器的更多信息here

String charset = "UTF-8";
String google = "https://www.googleapis.com/customsearch/v1?key={mykey}" +
                "&cx={mycxcode}&q=" +URLEncoder.encode(searchString, charset) +
                "&fields=queries/request(totalResults)";
String userAgent = "Mozilla/5.0 (Windows; U; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 2.0.50727)";
String totalResultsElementText = Jsoup.connect(google).userAgent(userAgent).ignoreContentType(true).get().text();

您的结果采用JSON格式,因此您可以提取最终值:

JSONObject json = new JSONObject(totalResultsElementText);
        System.out.println(json.getJSONObject("queries").getJSONArray("request").getJSONObject(0).get("totalResults"));