Question

python爬取headers中general的request url

python如何爬取headers中general的request url是否能用selenium+phantomjs的webdriver，来调用浏览器的F12功能，获取network下面headers的信息

Answer 1

python内有一个cookielib的包，可以获取cookie。第一次访问都是不带cookie的~~
下面是利用firebug进行测试：
由于之前访问过，所以在浏览器上存有该网站的cookie，将其清除。

此时再次访问就是真正意义上的第一次访问，此时再进行访问，抓包如下：

网站在对第一次访问的请求中会返回set-cookie，浏览器会将set-cookie进行存储，以后再进行访问时就会带上cookie值。so～第一次访问请求头是没有cookie的，如果你的有，那就是你之前访问过，cookie值一直保留在浏览器内。

追问

那怎么获取截图中，header里面general那里的request url？