我一直在尝试查找“查看此产品的客户也查看过”的Xpath信息,但我似乎无法正确获取代码。我对Xpath的经验很少,但我一直在使用在线刮刀获取信息并从中学习。
我一直在做的是
def AmzonParser(url):
headers = {'User-Agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/42.0.2311.90 Safari/537.36'}
page = requests.get(url,headers=headers)
def scraper():
While True:
XPATH_RECOMMENDED = '//a[@id="anonCarousel3"]/ol/li[1]/div/a/div[2] //href'
RAW_RECOMMENDED = doc.xpath(XPATH_RECOMMENDED)
RECOMMENDED = ' '.join(RAW_RECOMMENDED).strip() if RAW_RECOMMENDED else None
我的主要目标是让客户也查看链接。所以我可以将它传递给刮刀。这只是我代码的一小部分。