V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
DinoStray
V2EX  ›  问与答

批量吞吐数据, 用 redis 合适么

  •  
  •   DinoStray · Dec 23, 2021 · 1600 views
    This topic created in 1586 days ago, the information mentioned may be changed or developed.

    我们大概 40w 条数据, 500M 的样子.
    每一条数据都是实时更新的.
    我每分钟全量写入 redis 一次, 然后发通知给其他业务组, 他们收到通知就全量读一次。 这种方式合理么? 有什么改进方案推荐?
    使用 redis 主要还是希望双方节藕

    6 replies    2021-12-24 00:27:57 +08:00
    kaikai5601
        1
    kaikai5601  
       Dec 23, 2021 via iPhone
    mq
    F281M6Dh8DXpD1g2
        2
    F281M6Dh8DXpD1g2  
       Dec 23, 2021
    用 kafka 实时处理不就完了
    ch2
        3
    ch2  
       Dec 23, 2021
    你买过云计算的 redis ,就知道他们会限制内存吞吐量的
    mineralsalt
        4
    mineralsalt  
       Dec 23, 2021
    典型的消息队列应用场景, 这种用 redis 是不明智的, 也不优雅
    pi1ot
        5
    pi1ot  
       Dec 24, 2021
    scp ,rsync
    Jooooooooo
        6
    Jooooooooo  
       Dec 24, 2021
    为啥不直接发 kafka, 这还过一道 redis 有点多此一举.
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5366 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 287ms · UTC 01:14 · PVG 09:14 · LAX 18:14 · JFK 21:14
    ♥ Do have faith in what you're doing.