如何以编程方式使用浏览器 Cookie

Question

我有一个爬虫，可以自动登录和抓取网站，但是由于登录名已更改，它不再工作。

我

想知道，我可以将浏览器cookie（也就是我手动登录）提供给我的HTTP请求吗？原则上有什么特别错误的东西不会使这项工作起作用吗？如何找到与网站相关的浏览器 Cookie？

如果它有效，我如何获取可以粘贴到我的 HTTP 请求中的"原始"cookie 字符串？

我对这个领域很陌生，所以请原谅我的无知问题。我可以使用PYthon或Java。

Answer 1

当您发送登录信息（通常是为了响应许多其他请求）时，服务器会向客户端设置一些cookie，您必须跟踪它们并将其发送回服务器以进行每个后续请求。

完整的实现还将跟踪它们应该存储的时间。