magotcai
V2EX  ›  问与答

有没有什么可以代替腾讯云的 Oceanus

  •  
  •   magotcai · Aug 27, 2024 · 2041 views
    This topic created in 802 days ago, the information mentioned may be changed or developed.
    有没有开源的可以代替自己搭建,将 kafka 的数据实时流处理到 clickhouse
    12 replies  •  2024-08-29 11:44:22 +08:00
    F281M6Dh8DXpD1g2
    F281M6Dh8DXpD1g2
    Aug 27, 2024
    1
    自己写个呗
    8355
    8355
    Aug 27, 2024
    2
    clickhouse 不是有个 kafka 引擎吗 通过试图写入到表啊?
    lbp0200
    lbp0200
    Aug 27, 2024
    3
    流计算 Oceanus 是大数据产品生态体系的实时化分析利器,是基于 Apache Flink 构建的企业级实时大数据分析平台,具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点。流计算 Oceanus 以实现企业数据价值最大化为目标,加速企业实时化数字化的建设进程。

    楼主先了解下什么是 Apache Flink
    magotcai
    magotcai
    OP
    Aug 27, 2024
    4
    @lbp0200 就是为了方便处理,都是基于 Flink 的
    magotcai
    magotcai
    OP
    Aug 27, 2024
    5
    @8355 现在就是视图写入,但是改表会有点麻烦,Oceanus 很方便
    haimianbihdata
    haimianbihdata
    Aug 28, 2024 via Android
    6
    直接 flink cdc 过来啊
    magotcai
    magotcai
    OP
    Aug 28, 2024
    7
    @haimianbihdata 看了下,cdc 得 source 好像没有 kafka ,sink 也没有 clickhouse ,应该得自己实现吧
    haimianbihdata
    haimianbihdata
    Aug 28, 2024 via Android
    8
    等等,你的源头是 kafka 吗?
    magotcai
    magotcai
    OP
    Aug 29, 2024
    9
    @haimianbihdata 是的 源是 kafka
    magotcai
    magotcai
    OP
    Aug 29, 2024
    10
    @haimianbihdata 用了 seatunnel 还可以
    haimianbihdata
    haimianbihdata
    Aug 29, 2024 via Android
    11
    seatunnel 可以用自带的 zeta 引擎,我只是跑了一个 demo 好久前了,不过我看社区是推荐这个的
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1884 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 31ms · UTC 09:07 · PVG 17:07 · LAX 01:07 · JFK 04:07
    ♥ Do have faith in what you're doing.