如何使用Selenium Python提取href?

时间:2019-10-15 22:47:32

标签: python selenium-webdriver selenium-chromedriver href

<a class="j-search-result-value jiveTT-hover-user" data-userid="12345" href="/people/ARNLWS"><span class="j-search-result-title">Aaron Lewis</span></a>

<a class="j-search-result-value jiveTT-hover-user" data-userid="99886" href="/people/DONLDTUMP"><span class="j-search-result-title">Donald Trump</span></a>

如何从上方提取href?我尝试使用find_element_by_class_name,但返回NoSuchElementException: Message: no such element: Unable to locate element: {"method":"css selector","selector":".j-search-result-value jiveTT-hover-user"}

我的代码:

driver = webdriver.Chrome(r'xxxx\chromedriver.exe')

driver.get("xxx")

eList = driver.find_element_by_class_name('j-search-result-value jiveTT-hover-user')

hrefList = []
for e in eList:
   hrefList.append(e.get_attribute('href'))

for href in hrefList:
   print(href)

我之所以不使用xpath的原因,因为它可能因URL而异。 任何帮助表示赞赏!谢谢。

2 个答案:

答案 0 :(得分:1)

仅用于单个类名的方法.find_element_by_class_name

要收集元素列表,您必须使用.find_elements而不是.find_element

我建议您这样使用.find_elements_by_css_selector

eList = driver.find_elements_by_css_selector('.j-search-result-value.jiveTT-hover-user')

答案 1 :(得分:0)

想法: 建议找到包含data-userid属性的元素,然后提取其href属性:

未经测试的伪代码:

eList = driver.find_elements_by_x_path('//a[@data-userid]')

hrefList = []
for e in eList:
   hrefList.append(e.get_attribute('href'))

for href in hrefList:
   print(href)