半同步复制的“假确认”:备库回了ACK,事务为什么还是可能丢——ACK与可见的时间差

举报
这个DBA有点耶 发表于 2026/11/17 17:06:24 2026/11/17
【摘要】 开启半同步复制后,很多人以为“主库提交即安全”——只要备库回了ACK,事务就不会丢。但半同步的确认点在“备库写完relay log并刷盘”,而不是“事务在备库上已经apply可见”。当主库在收到ACK后立即故障、且备库SQL线程存在积压时,切换后的新主上,这个“已确认”的事务可能尚未生效。本文从复制线程的分工出发,拆解ACK的精确确认时机、rpl_semi_sync_master_wait_poi

大家好,我是小耶,写功课只是为了我踩过的坑,你们别再踩了!

“我们开了半同步复制,不会丢数据的。”这句话在架构评审会上经常听到,听着很让人安心。

但真实情况是:主库突然宕机,备库接管,切换成功,业务恢复。看起来一切正常。结果第二天对账,发现昨天最后几分钟的几笔交易,在新主上根本查不到。

备库明明回了ACK,事务怎么会丢?它没丢,它只是还没在备库上生效。

一、拆开复制的线程模型:ACK到底在哪一步产生

要理解这个时间差,得先把MySQL主从复制的线程分工拆清楚。

主从复制涉及三个线程:

主库的Binlog Dump线程:负责把binlog发送给备库。

备库的I/O线程:负责接收主库发来的binlog,写入备库本地的relay log,并刷盘。

备库的SQL线程:负责读取relay log,把事件逐条执行(apply),更新备库的数据页。

关键点:I/O线程和SQL线程是异步的。 I/O线程把binlog写进relay log就算完成,SQL线程什么时候执行,是另一回事。

半同步复制在哪个环节加了等待?在主库提交事务之前,等待备库的I/O线程确认“relay log已写入并刷盘”。

流程拆解:

  1. 主库执行事务,写binlog
  2. 主库的Dump线程把binlog发给备库
  3. 备库的I/O线程收到,写入relay log,刷盘
  4. I/O线程向主库返回ACK
  5. 主库收到ACK,事务标记为已提交,返回客户端

注意第4步:ACK由I/O线程返回,在relay log刷盘之后,不等SQL线程执行。 此时事务在备库上只是一个“躺在relay log里的待执行事件”,数据页上还看不到它。

二、ACK与可见的时间差:从relay log到数据页

ACK确认的是“relay log已持久化”,但事务要真正在备库上可见,还需要SQL线程执行完这个事件。

这个时间差的来源有三个:

来源一:SQL线程的排队。
relay log是一个先进先出的队列。如果SQL线程正在处理一个大事务(比如批量UPDATE了几百万行),后面的事件只能排队等。此时I/O线程持续接收新binlog、持续回ACK,但SQL线程的apply进度远远落后。

来源二:SQL线程的锁等待。
如果apply过程中遇到行锁冲突或MDL锁阻塞,SQL线程会卡住,积压快速累积。此时ACK照常返回,但事务在备库上迟迟不可见。

来源三:单线程回放的性能瓶颈。
即使没有大事务和锁等待,单线程SQL线程的回放速度也可能跟不上主库的写入速度。主库写入TPS 5000,SQL线程每秒只能apply 3000个事件,积压以每秒2000个事件的速度累积。积压越多,ACK与可见的时间差越大。

量化的视角:假设SQL线程积压了100万个事件,每个事件平均apply耗时0.1毫秒,这些事件全部执行完需要100秒。在这100秒的窗口内,所有“已ACK但未apply”的事务,在备库上都是不可见的。

三、rpl_semi_sync_master_wait_point参数:它解决的是另一个问题

很多人会问:半同步不是有rpl_semi_sync_master_wait_point参数吗?设成AFTER_SYNC不就更安全了?

这个参数控制的是主库在哪个环节等待ACK:

AFTER_COMMIT:主库先提交事务(对其他会话可见),再等待备库ACK。如果主库在等待ACK期间崩溃,其他会话已经看到了这个事务的结果,但备库可能没有——切换到备库后,这个事务“消失”了。

AFTER_SYNC:主库先等待备库ACK,收到ACK后再提交事务。如果主库在等待ACK期间崩溃,事务在主库上未提交、在备库上未apply,两边都看不到,数据是一致的。

AFTER_SYNC解决的是“主库崩溃时其他会话看到了不一致数据”的问题。但它解决不了本文说的“ACK与可见的时间差” ——因为无论AFTER_COMMIT还是AFTER_SYNC,ACK都只代表“relay log已刷盘”,不代表“SQL线程已apply”。

AFTER_SYNC降低了问题的影响面(至少主库侧不会出现“已提交但备库没有”的情况),但“ACK了但备库不可见”这个时间差在两种模式下都存在。

四、四类最容易踩坑的场景

场景一:大事务之后的密集写入。
主库跑完一个批量UPDATE(比如月结任务),产生了大量binlog。备库SQL线程正在逐条apply这个大事务的变更,后面的正常写入事件全部排队。此时主库收到ACK、正常返回客户端,但备库上这些事务要等大事务apply完才可见。

场景二:主库在收到ACK后立即故障。
主库收到ACK,标记提交,返回客户端。紧接着主库宕机。备库的relay log里有这个事务,但SQL线程还没执行。如果切换流程在开放读写之前没有强制apply完relay log,业务就可能读不到这些“已确认”的事务。

场景三:备库SQL线程因锁等待卡住。
备库上的读请求持有行锁或MDL锁,SQL线程apply时被阻塞,积压持续累积。ACK照常返回,但可见性延迟不断拉大。

场景四:级联复制中的中间节点。
A→B→C的级联架构中,B既是C的主库,又是A的备库。B对A回ACK的时机,和B把事务传给C并收到C的ACK的时机,是两个独立的时间点。级联层级越多,时间差的累积越复杂。

五、怎么排查这个时间差

第一步:看relay log的积压情况。

sql

SHOW SLAVE STATUS\G

关注两个字段:

  • Relay_Log_Space:relay log占用的总空间。如果这个值持续增长,说明I/O线程接收的速度快于SQL线程执行的速度,积压在累积。
  • Slave_SQL_Running_State:SQL线程当前的状态。如果是Waiting for dependent transaction或长时间的executing,说明SQL线程正在处理大事件或等待锁。

第二步:量化SQL线程的apply进度。

Seconds_Behind_Master会给出一个粗略的延迟值,但它的计算方式有局限——它比较的是“SQL线程正在执行的事件的时间戳”和“主库当前时间”,在某些场景下(比如SQL线程空闲但relay log有积压)会显示为0,掩盖真实延迟。

更精确的方式是配合pt-heartbeat:在主库定时写入心跳,在备库读心跳时间戳,两者的差值是真实的apply延迟。

第三步:在故障切换时确认relay log是否清空。

如果切换由MHA、Orchestrator或云平台的托管工具触发,需要确认切换流程中是否有“等待relay log apply完成”的步骤。可以检查切换工具的日志,或者在切换后立即查询Relay_Log_Space是否归零。

六、切换流程中必须做的保障

这个时间差不是半同步复制的bug,是“确认语义”的设计边界。要保证切换后数据可见,必须在切换流程里补上保障步骤。

保障一:切换前强制apply完relay log。

在提升备库为新主之前,先停止I/O线程(STOP SLAVE IO_THREAD),停止接收新binlog;然后等待SQL线程执行完relay log中剩余的所有事件(观察Relay_Log_Space归零或Slave_SQL_Running_State变为空闲);最后再执行提升。这一步在某些自动化切换工具中是默认的,但并非所有工具都保证。

保障二:对“确认即可见”有强需求的场景,评估组复制(MGR)。

MGR的认证和apply在提交路径上的处理与半同步不同,但它也带来性能代价和运维复杂度。选型时需要权衡“确认语义的严格程度”和“性能开销”。

保障三:业务侧的兜底设计。

对于核心交易类业务,即使开了半同步,也应该在业务层保留幂等和补偿能力。数据库层面的复制协议提供的是“尽力而为”的持久性保证,业务层的幂等才是最后的防线。

七、小结

半同步复制的ACK确认的是“备库的relay log已持久化”,不是“备库的数据页已apply可见”。I/O线程和SQL线程的异步分工,决定了“收到日志”和“看到数据”之间存在一个时间差。大事务、锁等待、单线程回放瓶颈会把时间差放大;主库在收到ACK后立即故障,切换后的新主上可能暂时读不到这些“已确认”的事务。排查的核心是看Relay_Log_Space是否积压、SQL线程是否跟不上;切换流程中必须强制等待relay log apply完成再开放读写。半同步不是“确认即可见”,理解这个语义边界,才能正确设计切换流程和业务预期。

小耶在手,SQL 不愁

还有什么想了解的,欢迎留言!小耶一定知无不言言无不尽……我们下次见~

【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0)

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。