通过Beautifulsoup模块,我提取了一个HTML页面。从该页面,我进一步提取了一个Javascript脚本标记。在脚本标记内部,有一个我想要使用的对象文字。你可以看到我想要实现的目标:
<script>
var main_obj = {
"link":"",
"stock":"",
"price":[{"qty":1000,"value":"100$"}, {"qty":10000,"value":"1000$"}]
}
</script>
我想访问main_obj中price变量的对象文字中的qty和value变量。三江源
答案 0 :(得分:1)
一种选择是使用selenium
。特别是,您可以使用execute_script
转换为Python可以轻松解析的JSON字符串。
由于我不知道您正在使用的网页的URL是什么,我只是创建了一个包含脚本标记示例的本地HTML文件。使用headless不是强制性的,我只添加了该选项,因此浏览器窗口不会打开。
test.html
<!DOCTYPE html>
<html>
<body>
<script>
var main_obj = {
"link": "",
"stock": "",
"price": [{"qty": 1000, "value": "100$"}, {"qty": 10000, "value": "1000$"}]
}
</script>
</body>
</html>
In[2]: import os
...: import json
...:
...: from selenium import webdriver
...:
...: chrome_options = webdriver.ChromeOptions()
...: chrome_options.add_argument('--headless')
...: driver = webdriver.Chrome(chrome_options=chrome_options)
...:
...: driver.get('file://{}/test.html'.format(os.getcwd()))
...: json_string = driver.execute_script('return JSON.stringify(main_obj)')
...: driver.quit()
...:
...: json_data = json.loads(json_string)
In[3]: json_data
Out[3]:
{'link': '',
'stock': '',
'price': [{'qty': 1000, 'value': '100$'}, {'qty': 10000, 'value': '1000$'}]}
In[4]: for item in json_data['price']:
...: print('Quantity: {:d}\tValue: ${:.2f}'.format(
...: item['qty'], float(item['value'].rstrip('$'))
...: ))
...:
Quantity: 1000 Value: $100.00
Quantity: 10000 Value: $1000.00