Jsoup移动数据消费

时间:2015-07-13 14:07:09

标签: html-parsing jsoup network-utilization

我正在使用Jsoup在后台解析每10分钟左右3个不同网页的html。但是我发现在2天内我消耗了18 MB的网络数据......有没有办法减少这种巨大的数据消耗?我不需要所有的html页面,有没有办法只下载网站的一部分HTML?

1 个答案:

答案 0 :(得分:0)

一种方法是创建一个执行抓取和解析的Web服务,并以精简的形式将结果提供给您。也许在openshift上创造一些东西?

18MB实际上不会超过2天。你确定你买不起吗?