创建一个基于 Spark 的生产平台，什么样的硬件配置是最普遍的

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

› Apache Hadoop

› Treasure Data

这是一个创建于 3184 天前的主题，其中的信息可能已经有所发展或是发生改变。

每天数据量大约是 1000 万条，大部分是文本，需要快速查询出结果。
spark 对内存要求比较高，业内普遍的服务器配置里面 CPU 和内存是怎么配置的？

谢谢！

2 条回复 • 2016-03-17 07:59:35 +08:00

knightdf

2016-03-16 23:47:38 +08:00

才 1000W 而已嘛，啥配置不行。。。

mringg

2016-03-17 07:59:35 +08:00 via Android

貌似数据量有点小