对于Filepicker.io,我们构建了“从网址抓取”,但某些网站对不传递User-Agent标头感到不满意。我可以按照其他answers的建议使用股票浏览器用户代理,但作为一个优秀的网络公民,我想知道是否有更合适的用户代理为服务器设置请求其他服务器的数据?
答案 0 :(得分:1)
取决于您编写服务器的语言。例如,Python的urllib将默认值设置为User-agent: Python-urllib/2.1
,但您可以轻松地将其设置为User-agent: filepicker.io/<your-version-here>
或更具特定语言的内容如果你愿意的话。