如何从BeautifulSoup中的可切换选项卡获取内容?

时间:2017-12-17 13:03:09

标签: python web-scraping beautifulsoup

网站上有4个可切换标签,我设法从第一个标签中提取,但无法弄清楚如何从其他三个标签中提取,因为需要点击标签(我认为)。

  • 产品详情
  • 反馈
  • 运输&付款
  • 卖家保证

我的代码:

import bs4
from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup
myurl = 'https://www.aliexpress.com/item/Vfemage-Womens-Elegant-Ruched-Bow-Contrast-Patchwork-3-4-Sleeve-Vintage-Pinup-Work-Office-Party-Fitted/32831085887.html?spm=2114.search0103.3.12.iQlXqu&ws_ab_test=searchweb0_0,searchweb201602_3_10152_10065_10151_10344_10068_10345_10342_10325_10343_51102_10546_10340_10548_10341_10609_10541_10084_10083_10307_10610_10539_10312_10313_10059_10314_10534_100031_10604_10603_10103_10605_10594_10142_10107,searchweb201603_25,ppcSwitch_5&algo_expid=a3e03a67-d922-4c90-aba7-d3cc80101a75-1&algo_pvid=a3e03a67-d922-4c90-aba7-d3cc80101a75&rmStoreLevelAB=0'

uClient = uReq(myurl)
page_html = uClient.read()
uClient.close()
page_soup = soup(page_html, "html.parser")
productdetails = page_soup.select("ul.product-property-list.util-clearfix li")

如何从其他3个标签中提取内容?

1 个答案:

答案 0 :(得分:1)

我使用Selenium点击每个标签&用它从所有标签中提取内容。