试图webscrape一个网站，但得到403被禁止

Question

我试图访问ticketmasters网站以获取活动价格。

然而，我遇到了httpparty在尝试抓取网站时返回403错误的问题

这就是我的全部

page = HTTParty.get(ticketmaster_url)
 doc = Nokogiri::HTML(page)

403出现在接到电话

由于 萨姆

Answer 1

不确定您在此处使用HTTParty的原因。您可以简单地使用Nokogiri

来操作和解析页面

require 'open-uri'
doc = Nokogiri::HTML(open(ticketmaster_url))

其中ticketmaster_url是您要从中提取信息的网页的网址。