如何使用Jsoup从相对HTML链接中提取绝对URL?

时间:2010-11-10 12:38:11

标签: java url jsoup

我正在使用Jsoup来提取网页的网址。这些网址的href属性是相对的:

<a href="/text">example</a>

这是我的尝试:

Document document = Jsoup.connect(url).get();
Elements results = document.select("div.results");
Elements dls = results.select("dl");
for (Element dl : dls) {
    String url = dl.select("a").attr("href");
}

这样可以正常使用,但如果我使用

String url = dl.select("a").attr("abs:href");

获取像http://example.com/text这样的绝对网址,它无效。我如何获得绝对URL?

2 个答案:

答案 0 :(得分:15)

您需要Element#absUrl()

String url = dl.select("a").absUrl("href");

顺便说一句,你可以缩短选择范围:

Document document = Jsoup.connect(url).get();
Elements links = document.select("div.results dl a");
for (Element link : links) {
    String url = link.absUrl("href");
}

答案 1 :(得分:8)

String url = dl.select("a").absUrl("href");

不正确,因为dl.select("a")不会返回单个项目而是返回集合。 您需要按索引获取元素

例如:

Elements elems = dl.select("a");
Element a1 = elems.get(0); //0 is the index first element increasing to (elems.size()-1)
now you can do
a1.absUrl("href");

如果您确定上面的选择只会产生一个项目,或者您想要的项目是第一项,您可以:

String url = dl.select("a").get(0).absUrl("href"); 

也与

相同
String url = dl.select("a").first().absUrl("href");

无论如何它不一定是第一个元素,你总是可以替换0 in String url = dl.select("a").get(0).absUrl("href");包含元素的索引。 或者使用更具体的选择,只会产生一个元素。