V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
推荐工具
RoboMongo
推荐书目
50 Tips and Tricks for MongoDB Developers
Related Blogs
Snail in a Turtleneck
salamanderMH
V2EX  ›  MongoDB

MongoDB 数据量大备份方法?

  •  
  •   salamanderMH · Jul 30, 2019 · 14972 views
    This topic created in 2471 days ago, the information mentioned may be changed or developed.

    问题

    现在搭的是 MongoDB 的副本集,我之前一直用 mongodump 备份的,但是现在一台机器上磁盘大小有 500 多 G 了,不知道大家是怎么备份的

    9 replies    2019-08-07 15:03:44 +08:00
    UglyOrange
        1
    UglyOrange  
       Jul 31, 2019
    做一个延时节点(比如延时半天)当备份. 或者停一个节点物理拷文件..
    dingyaguang117
        2
    dingyaguang117  
       Jul 31, 2019
    1LZ 正解, 主从或者复制集, 性能也提高 LOL
    mikeguan
        3
    mikeguan  
       Jul 31, 2019 via Android
    oplog 可以设大点,避免停机追不上
    luozic
        4
    luozic  
       Jul 31, 2019 via iPhone
    主从,从从库上做增量备份,定期(每天,每星期)做一次全量备份
    asilin
        5
    asilin  
       Jul 31, 2019
    500 多 GB 还行吧,之前我们在 UCloud 云主机备份过三个复制组、共 2TB 的数据。

    不过我们是根据业务层面的数据插入时间来检索备份的,小时级别共 3 个月的数据,大概一天就备份完了,可以作为参考。
    sujin190
        6
    sujin190  
       Jul 31, 2019
    @luozic #4 MongoDB 的增量备份怎么做?

    MongoDB 的副本集可以添加备份节点的吧,我感觉最快的应该是添加一个备份节点,然后关停复制或者 sync 了吧,或许更快的应该的是不是直接停机,如果 UCloud 的话可以直接数据方舟创建一个备份时间点来的更快啊,不知道阿里云腾讯云之类的有么有相同服务
    salamanderMH
        7
    salamanderMH  
    OP
       Jul 31, 2019
    @mikeguan 我的 oplog 大小是 38243.64MB,是不是有点小?
    luozic
        8
    luozic  
       Aug 2, 2019 via iPhone
    Google 一下 monogodb 增量备份
    lenmore
        9
    lenmore  
       Aug 7, 2019
    如果磁盘是 LVM,可以用 LVM 的快照功能做物理备份。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   809 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 50ms · UTC 22:14 · PVG 06:14 · LAX 15:14 · JFK 18:14
    ♥ Do have faith in what you're doing.