在我抓取该网站时,要么我疯了,要么是chrome开发人员工具中“网络”下的“表单数据”>标题发生了变化。
具体地说,我正在使用以下网址:https://www.kayak.com/cars/JFK/2019-04-01/2019-05-01?sort=rank_a
我正在尝试查找用于搜索该页面的表单数据,我将其缩小到以下范围:
但是,令我沮丧的是,我没有这方面的证明,我可以发誓,第一次查看此特定请求时,Form Data会在其中包含更多字段。之所以这么说,部分原因是因为我的脚本中最初有一组字段用作POST数据,通过观察devtools中的Form Data字段,我可以肯定地获得了这些字段。
data = {
'pickupAirport':iata,
'pickupDate':start_date,
'dropoffDate':end_date,
}
如果不是来自此请求的表单数据,则不确定这些字段将来自何处。我当然没有把他们从空中抽出来,但是我无法终生依靠devtools回到他们。
有什么想法吗?