如何从这个页面获取链接?

时间:2017-02-11 21:52:33

标签: xpath web-scraping scrapy scrapy-spider

此页面上有一些数据:

$ scrapy shell 'https://www.catalogs.ssg.asia/toyota/?lang=en#bWFya2V0PT1nZW5lcmFsfHxzdD09MjB8fHN0cz09eyIxMCI6IlJlZ2lvbiIsIjIwIjoiTWlkZGxlIEVhc3QifQ%3D%3D'

我无法从这张桌子上抓取网址,每当我尝试用它选择它时,我得到一个空集。

  

response.css( 'TR [类=超过]')。提取物()

1 个答案:

答案 0 :(得分:0)

使用public void button_Click(object sender, RoutedEventArgs e) { int Length = Convert.ToInt32(textBox.Text); Länge = Length; MessageBox.Show(Convert.ToString(Länge)); } 打开计算机上下载的scrapy的HTML,您会发现没有表格。

scrapy只返回HTML代码,当数据由JavaScript生成时,它不会被scrapy返回。