jamesyf's recent timeline updates
jamesyf

jamesyf

V2EX member #115789, joined on 2015-05-08 06:11:57 +08:00
jamesyf's recent replies
Nov 12, 2016
Replied to a topic by phttc Kafka kafka 流量大
尽量多用 batching, 一次网络沟通多发几个信息,这样你的 network 效率比较高,硬盘性能也会好很多

基本思路:
1. producer type 用 async
2. batch.size 尽量调大
3. linger.ms 适当调大
你是写什么 hadoop 代码?如果是 java/scala 的 mapreduce 代码的话一般你可以使用 maven/gradle/ant 来做依赖管理,只要把这些东西陪好的话 intellij 就可以自动把对应的依赖拉下来做代码补全。
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2258 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 14ms · UTC 00:29 · PVG 08:29 · LAX 17:29 · JFK 20:29
♥ Do have faith in what you're doing.