这是一个创建于 3019 天前的主题，其中的信息可能已经有所发展或是发生改变。
在做一个分布式的爬虫，基本抓取的工作已经写完了，现在就差后端的存储，有时需要存储各种各样的数据结构(方便查看)，所以感觉 NoSQL 更能满足自身的需要，看了很多开源的爬虫，基本数据库都选用的 mongodb 作为后端数据库的存储或是 sqlite,V 有什么建议吗？
 |
1
ppwangs 2016-08-03 12:57:32 +08:00
数据量有多大，索引很有难度么？
mangodb 挺好的啊 |
 |
2
winglight2016 2016-08-03 15:58:38 +08:00
好巧，我也做类似的东西，在用 parse+mongodb
|
 |
3
klesh 2016-08-04 00:44:10 +08:00
sqlite 数据量大时撑不住吧，况且它不是 nosql 的。
|
Select Language