数据计算压力不小的,16 小时 760GB 数据过去,我看了下 CPU 占用高的线程,调用栈就是在执行计算,代码应该没有漏洞的,可能就是性能不行?
但是我的理解,流计算这种本来不就是计算密集型的吗,我吃 CPU 很正常啊,还是说能优化下?求指教
但是我的理解,流计算这种本来不就是计算密集型的吗,我吃 CPU 很正常啊,还是说能优化下?求指教
1
sadfQED2 Apr 14, 2023 via Android
除了加机器,还能有其他优化?数仓这一套,本来就是堆机器换性能啊
|
2
haoyunyinglai Apr 14, 2023
换 Spark ?单机的话感觉 flink 的优势没法完全体现出来啊
|
3
kkkiio Apr 14, 2023 via iPhone
Flink 也是普通程序,想优化就 profile 看看瓶颈咯
|