1
cdxem713 2014-10-30 16:54:10 +08:00
json的url是不是有post的数据?
|
2
ljcarsenal OP @cdxem713 现在知道原因了。。请求json时,http的header referer 要和那个框架的url相同。。现在问题来了,怎么动态设置header。。
|
4
cdxem713 2014-10-30 17:16:59 +08:00
@ljcarsenal 没用过scrapy不知道呢,一般都可以设置header的吧,形式一般是key-value pair那样的,设置成这个网站的首页地址试试。
|
5
fxbird 2014-10-30 21:15:42 +08:00
用phantomjs试试,它可以获得页面源代码,并且可以用js来操作dom,我也是刚学,用它把post改成get提交一个表单,总是跳到另外一个页
|
6
14 2014-10-30 22:48:33 +08:00
json多好啊,都不需要自己结构化数据了……
|
7
pynix 2014-10-30 22:59:58 +08:00
urllib都可以设置的嘛。。
|
8
GeekGao 2014-10-31 00:24:07 +08:00
"会报 非法请求的错误" 多半是因为你没加该加的header啊
|
9
konakona 2014-10-31 06:24:55 +08:00
把網頁show出來大夥一看不就明白了
|
10
zhyu 2014-10-31 09:00:07 +08:00
用phantomjs
|