V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
magotcai
V2EX  ›  问与答

有没有什么可以代替腾讯云的 Oceanus

  •  
  •   magotcai · Aug 27, 2024 · 1575 views
    This topic created in 618 days ago, the information mentioned may be changed or developed.
    有没有开源的可以代替自己搭建,将 kafka 的数据实时流处理到 clickhouse
    12 replies    2024-08-29 11:44:22 +08:00
    F281M6Dh8DXpD1g2
        1
    F281M6Dh8DXpD1g2  
       Aug 27, 2024
    自己写个呗
    8355
        2
    8355  
       Aug 27, 2024
    clickhouse 不是有个 kafka 引擎吗 通过试图写入到表啊?
    lbp0200
        3
    lbp0200  
       Aug 27, 2024
    流计算 Oceanus 是大数据产品生态体系的实时化分析利器,是基于 Apache Flink 构建的企业级实时大数据分析平台,具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点。流计算 Oceanus 以实现企业数据价值最大化为目标,加速企业实时化数字化的建设进程。

    楼主先了解下什么是 Apache Flink
    magotcai
        4
    magotcai  
    OP
       Aug 27, 2024
    @lbp0200 就是为了方便处理,都是基于 Flink 的
    magotcai
        5
    magotcai  
    OP
       Aug 27, 2024
    @8355 现在就是视图写入,但是改表会有点麻烦,Oceanus 很方便
    haimianbihdata
        6
    haimianbihdata  
       Aug 28, 2024 via Android
    直接 flink cdc 过来啊
    magotcai
        7
    magotcai  
    OP
       Aug 28, 2024
    @haimianbihdata 看了下,cdc 得 source 好像没有 kafka ,sink 也没有 clickhouse ,应该得自己实现吧
    haimianbihdata
        8
    haimianbihdata  
       Aug 28, 2024 via Android
    等等,你的源头是 kafka 吗?
    magotcai
        9
    magotcai  
    OP
       Aug 29, 2024
    @haimianbihdata 是的 源是 kafka
    magotcai
        10
    magotcai  
    OP
       Aug 29, 2024
    @haimianbihdata 用了 seatunnel 还可以
    haimianbihdata
        11
    haimianbihdata  
       Aug 29, 2024 via Android
    seatunnel 可以用自带的 zeta 引擎,我只是跑了一个 demo 好久前了,不过我看社区是推荐这个的
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1124 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 36ms · UTC 17:58 · PVG 01:58 · LAX 10:58 · JFK 13:58
    ♥ Do have faith in what you're doing.