使用Jsoup抓取加载图片的网页?

时间:2018-06-13 02:56:34

标签: java web-crawler jsoup connection-timeout

我正在构建一个用于搜索的网络抓取工具。因为我只需要索引文章的标题。我使用Jsoup来连接url目的地。

Jsoup.connect(url).timeout(20000).execute();

但我遇到问题连接超时,我想知道如果超时,因为在网址上加载了很多图片。

如何在不使用Jsoup加载图片的情况下获取网页?

先谢谢了,

1 个答案:

答案 0 :(得分:0)

要确认页面加载时间不长,请尝试在浏览器中打开该网址,并观察加载页面所需的时间。

Jsoup可以通过在超时中提供(0)来无限期等待,例如

Jsoup.connect(url).timeout(0).execute();

但是,对于超时,可以在以下link中更好地解释。