我正在开发一个Linkedin web scraping项目。我想获取某人感兴趣的公司列表(注意我没有使用API)。这是一个动态的网站,所以我需要向下滚动,同时刮取公司的名称。我知道如何在MAIN窗口中执行此操作,但由于Interest是弹出窗口this滚动解决方案不起作用。到目前为止我的代码是:
from selenium.webdriver.common.keys import Keys
bar = driver.find_element_by_xpath('//ul[@class="entity-list row"]')
bar.send_keys(Keys.END)
由于它不起作用,我也尝试过:
bar = driver.find_element_by_xpath('//ul[@class="entity-list row"]')
driver.execute_script('arguments[0].scrollTop = arguments[0].scrollHeight', bar)
问题在于我没有在弹出窗口中操作,而是在主窗口中操作,因此它没有达到预期的效果。
答案 0 :(得分:2)
您可以尝试在弹出窗口中找到元素(可以聚焦的元素),例如一些锚点:
element_inside_popup = driver.find_element_by_xpath('//div[@class="entity-list-wrapper ember-view"]//a')
然后使用下面的代码滚动弹出窗口:
from selenium.webdriver.common.keys import Keys
element_inside_popup.send_keys(Keys.END)