V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐工具
RoboMongo
推荐书目
50 Tips and Tricks for MongoDB Developers
Related Blogs
Snail in a Turtleneck
salamanderMH
V2EX  ›  MongoDB

MongoDB 数据量大备份方法?

  •  
  •   salamanderMH · 2019-07-30 23:10:18 +08:00 · 14381 次点击
    这是一个创建于 1950 天前的主题,其中的信息可能已经有所发展或是发生改变。

    问题

    现在搭的是 MongoDB 的副本集,我之前一直用 mongodump 备份的,但是现在一台机器上磁盘大小有 500 多 G 了,不知道大家是怎么备份的

    9 条回复    2019-08-07 15:03:44 +08:00
    UglyOrange
        1
    UglyOrange  
       2019-07-31 02:42:05 +08:00
    做一个延时节点(比如延时半天)当备份. 或者停一个节点物理拷文件..
    dingyaguang117
        2
    dingyaguang117  
       2019-07-31 07:00:22 +08:00
    1LZ 正解, 主从或者复制集, 性能也提高 LOL
    mikeguan
        3
    mikeguan  
       2019-07-31 07:58:37 +08:00 via Android
    oplog 可以设大点,避免停机追不上
    luozic
        4
    luozic  
       2019-07-31 08:05:10 +08:00 via iPhone
    主从,从从库上做增量备份,定期(每天,每星期)做一次全量备份
    asilin
        5
    asilin  
       2019-07-31 09:21:41 +08:00
    500 多 GB 还行吧,之前我们在 UCloud 云主机备份过三个复制组、共 2TB 的数据。

    不过我们是根据业务层面的数据插入时间来检索备份的,小时级别共 3 个月的数据,大概一天就备份完了,可以作为参考。
    sujin190
        6
    sujin190  
       2019-07-31 10:02:41 +08:00
    @luozic #4 MongoDB 的增量备份怎么做?

    MongoDB 的副本集可以添加备份节点的吧,我感觉最快的应该是添加一个备份节点,然后关停复制或者 sync 了吧,或许更快的应该的是不是直接停机,如果 UCloud 的话可以直接数据方舟创建一个备份时间点来的更快啊,不知道阿里云腾讯云之类的有么有相同服务
    salamanderMH
        7
    salamanderMH  
    OP
       2019-07-31 10:10:21 +08:00
    @mikeguan 我的 oplog 大小是 38243.64MB,是不是有点小?
    luozic
        8
    luozic  
       2019-08-02 17:46:18 +08:00 via iPhone
    Google 一下 monogodb 增量备份
    lenmore
        9
    lenmore  
       2019-08-07 15:03:44 +08:00
    如果磁盘是 LVM,可以用 LVM 的快照功能做物理备份。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2517 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 226ms · UTC 15:44 · PVG 23:44 · LAX 07:44 · JFK 10:44
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.