我有一个自动登录和抓取网站的抓取工具,但由于登录已更改,因此无法再使用。
我想知道,我可以将浏览器cookie(也就是我手动登录)提供给我的HTTP请求吗?原则上有什么特别错误会导致这项工作无效吗?如何找到与网站相关的浏览器cookie?
如果有效,我如何获得可以粘贴到HTTP请求中的“原始”cookie字符串?
我对这个领域很陌生,请原谅我无知的问题。我可以使用PYthon或Java
答案 0 :(得分:0)
当您发送登录信息时(通常是为了响应许多其他请求),服务器会为客户端设置一些cookie,您必须跟踪它们并将它们发送回服务器以获取每个后续请求。
完整的实施也会跟踪它们应该存储的时间。