在请求爬虫的时候 cookie 传入的方式不同返回的数据不一样

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

V2EX 提问指南

这是一个创建于 2179 天前的主题，其中的信息可能已经有所发展或是发生改变。

我在请求一些网站的时候，cookie 以 str 方式放入 cookie 里面还有一种是 header 和 cookie 分开参数传递的比如这种 headers=headers，cookie=cookie

还有一种是就是把 cookie 直接写到 header 里面

4 条回复 • 2018-12-08 11:01:01 +08:00

luosuosile

2018-12-07 17:21:07 +08:00

因为有时候 cookie 会关闭吧

luoleng

2018-12-07 23:36:05 +08:00

scrapy 的 setting 里面有个 COOKIES_ENABLED 的参数

Ewig

2018-12-08 11:00:49 +08:00

@luoleng 我设置为 true 了没用的

Ewig

2018-12-08 11:01:01 +08:00

@luosuosile 我设置 COOKIES_ENABLED=true

在请求爬虫的时候 cookie 传入的方式不同 返回的数据不一样