由于“显示更多”按钮而无法获取所有网络数据

时间:2018-10-04 07:40:05

标签: python selenium

我是一名新的python编码器,我想从该网站(https://appexchange.salesforce.com/consulting)抓取所有数据,但是由于Show More按钮的缘故,我无法全部抓取。

这是我的代码,请帮助。

from selenium import webdriver
from bs4 import BeautifulSoup

driver = webdriver.Chrome(executable_path = r'C:\Projects\WebScraping\chromedriver.exe')
url = 'https://appexchange.salesforce.com/consulting'

# create html page
driver.get(url)

#create soup 
soup =  BeautifulSoup(driver.page_source, 'lxml')

0 个答案:

没有答案