V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
q15673355
V2EX  ›  Redis

redis aof 重写疑问

  •  
  •   q15673355 · 2021-03-30 23:22:42 +08:00 · 2018 次点击
    这是一个创建于 1094 天前的主题,其中的信息可能已经有所发展或是发生改变。

    redis aof 重写的时候,主线程依然可以进行写操作,并把写操作记录到重写缓冲区,以便重写完成后,更新重写期间改变的数据。

    不是很清楚 redis aof 重写(不起用混合持久化)的具体流程 我的疑问是会不会出现下面的情况:

    重写开始的时候,内存中某个键 A 的值是 1,然后有一条命令把它+1,改成了 2,并且这条命令也写到了重写缓冲区,但是此时这条数据还没有被重写到新的 aof 文件。等重写过程已经遍历完整个内存中的数据,此时键 A 的值是 2,开始读取重写缓存中的命令时,会不会被+1 的命令重新修改变成 3

    8 条回复    2021-03-31 10:03:40 +08:00
    sujin190
        1
    sujin190  
       2021-03-30 23:28:05 +08:00
    重写都是单独 fork 进程处理的,和当前数据完全是隔离独立的,而且这个地方说的是重写过程中写指令追加到重写缓冲区,重写完成后再追加到重写文件,数据操作早就完成
    q15673355
        2
    q15673355  
    OP
       2021-03-30 23:36:44 +08:00
    和当前数据完全是隔离独立的,具体是怎么隔离的? COW?
    就我说的情况,在 aof 文件中,键 A 的值是 1 还是 2 ?如果按你说的数据的完全隔离独立的话应该就是 1 吧
    q15673355
        3
    q15673355  
    OP
       2021-03-30 23:38:57 +08:00
    cubecube
        4
    cubecube  
       2021-03-31 00:16:20 +08:00
    aof 中应该是 set 1 add1 两条分别的记录。终值为 2 而已。

    根本不存在:等重写过程已经遍历完整个内存中的数据,此时键 A 的值是 2,这个过程。
    他把 aof 文件读完后直接去追 buffer 中的缓存命令,追上就完事儿。
    securityCoding
        5
    securityCoding  
       2021-03-31 09:31:58 +08:00
    记住一点 aof 是写操作命令记录,重写 aof 也是重放所有 kv 的写操作命令而已。期间除了 fork 子进程瞬间操作外不会阻塞 io 线程。

    1. fork 进程重写 aof
    2. 不能阻塞 io 线程,此时会通过 cow 将写操作记录到缓冲区
    3.aof 重写完成时再追加写入期间的写操作记录
    4.完成替换
    sujin190
        6
    sujin190  
       2021-03-31 09:42:46 +08:00
    aof 重写是单独 fork 的进程,啥咋隔离? aof 文件记录的是所有的操作,又不是当前值,哪来的是 1 还是 2 的问题
    shanghai1943
        7
    shanghai1943  
       2021-03-31 09:50:22 +08:00
    aof 文件里应该是所有执行过的指令的记录。一个 key 执行了多次那就会在 aof 文件里记录多次。Redis 重启的时候可以从 aof 文件里读取,相当于把 aof 文件里的指令重新执行一次。
    q15673355
        8
    q15673355  
    OP
       2021-03-31 10:03:40 +08:00
    我想我有这个疑问的根本原因是不了解 fork 子进程的机制,或者有人在说 aof 重写的时候明确提到 cow,那样的话我就不会有这个疑问了。 @sujin190 的回答对我的问题来说是很合适的,谢谢各位
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   987 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 35ms · UTC 20:16 · PVG 04:16 · LAX 13:16 · JFK 16:16
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.