scrapy shell 可以取到的数据，到 scrapy 爬虫却取不出来。有没有大神帮解决一下
dapengzhao · 2018-03-01 11:19:33 +08:00 · 1818 次点击这是一个创建于 2460 天前的主题，其中的信息可能已经有所发展或是发生改变。
这是 scrapy shell In [34]: response.xpath('//div[@class="name"]/a/text()').extract() Out[34]: ['清博大数据']
这是 scrapy 爬虫对应的字段 author = response.xpath('//div[@class="name"]/a/text()').extract()
结果
'Author': [], 'Category_ID': 0, 'Content': [], 'Favorites': 0, 'PublishTime': [], 'ReadCounts': 0, 'Source': '百家号', 'SourceType': '文化', 'Source_ID': 34,
这是源代码
<section id="content" class="content clearfix">
<aside class="aside">
大数据生态系统的智能服务者。
目前尚无回复
Select Language