🔍 登录 注册

逻辑复制读写分离实战,订阅端的故障切换与流量编排

半 半山听雨 2026-11-22 👁 0 ⏱ 4min

逻辑复制读写分离实战,订阅端的故障切换与流量编排

逻辑复制常被当 CDC 工具(第十五章逻辑订阅篇已讲数据分发),但它同样可以做读写分离的底座:订阅端拉起只读副本承接查询流量。与物理流复制相比各有取舍,本文讲清逻辑复制做读写分离的架构形态、冲突处理、故障切换,以及"什么时候该选它而不是物理复制"。

一、两种复制的读写分离取舍

维度 物理流复制 逻辑复制(订阅端只读)
复制粒度 整个集群实例 表级/行级(可选子集)
版本兼容 跨大版本受限(升级窗口约束) 跨大版本、跨平台(8→9 升级期混跑)
DDL 同步 自动 不同步(订阅端要手工/工具维护 schema)
序列与大对象 自动 不同步(应用侧规避)
冲突处理 无(物理块级) 有(订阅端可写时会冲突,需策略)
典型用途 标准读写分离 升级混跑、跨版本查询副本、部分表分发

结论先行:标准读写分离用物理复制(简单可靠);逻辑复制做读写分离的真正战场是三个特殊场景——大版本升级期的"新版本查询副本"、只分发部分表的"数据子集查询"、以及跨机房/跨云的表级分发。

二、搭建:发布-订阅的读写分离形态

-- 主库(发布端,承接写)
CREATE PUBLICATION orders_pub FOR TABLE orders, order_items;

-- 订阅端(查询副本,承接读)
CREATE SUBSCRIPTION orders_sub
  CONNECTION 'host=primary.demo port=5432 dbname=shop user=sub_user'
  PUBLICATION orders_pub
  WITH (copy_data = true, create_slot = true, enabled = true);

-- 订阅端强制只读(防应用误写导致冲突)
ALTER DATABASE shop SET default_transaction_read_only = on;

架构要点:

  1. 订阅端只读是纪律不是建议:逻辑复制冲突的根源就是订阅端被写入(主键冲突、行丢失),只读设置 + 权限收敛(订阅进程专用账号有写权限,应用账号只读)双保险;
  2. DDL 维护流程:主库 DDL 不会自动到订阅端——变更流程变成"先订阅端加列(兼容旧数据)→ 主库加列",与第十七章 Expand-Contract 同构;
  3. 过滤与变换:发布端可用 FOR TABLE ... WHERE(行过滤)只发部分数据,订阅端字段级裁剪要在发布端建专用发布实现。

三、延迟监控与一致性承诺

逻辑复制的延迟观测与物理复制不同,两套指标都要看:

-- 订阅端:追赶状态(pg_stat_subscription)
SELECT subname, received_lsn, latest_end_lsn,
       latest_end_time - now() AS lag_time
FROM pg_stat_subscription;

-- 发布端:槽位堆积(slot 的 walfail 风险,vacuum 篇讲过过期 slot 危害)
SELECT slot_name, active, restart_lsn,
       pg_size_pretty(pg_wal_lsn_diff(pg_current_wal_lsn(), restart_lsn)) AS retained_wal
FROM pg_replication_slots WHERE slot_type = 'logical';

-- 应用侧一致性水位:复制身份标记表(心跳表)
-- 主库每秒写心跳 → 订阅端读心跳时间戳 → 应用按"最大可容忍延迟"路由查询

心跳表模式是逻辑复制读写分离的实用件:应用写查询路由不信任"看起来同步",而是读副本上的心跳时间戳——心跳落后超过阈值(如 10 秒)就把强一致读自动切回主库。这是第十章"一致性逃生通道"在逻辑复制形态下的实现。

四、故障切换:订阅端提升为主的三步验证

逻辑复制拓扑里"订阅端提升为主"是可能的(表结构与数据都在),但要按流程走:

1. 停写主库(维护窗口),确认订阅端 LSN 追平(received_lsn == latest_end_lsn)
2. 订阅端 DROP SUBSCRIPTION(释放发布端 slot,防 slot 堆积拖垮旧主)
3. 订阅端解除只读(default_transaction_read_only=off + 应用账号提权)
4. 应用切换连接串(配置中心/网关路由,参考第七章热更)
5. 旧主恢复后以"反向订阅"身份回归(建反向发布-订阅),不直接写

反向订阅的对称性值得强调:切换后新旧角色对调,旧主作为订阅端追赶新主的数据——这保证切换是可回退的(出问题再对称地切回去),比"单向升级"安全得多。

五、冲突的预防与处理

即使订阅端严格只读,冲突仍可能来自运维误操作与边界场景:

-- 冲突的观察:订阅 worker 报错暂停
SELECT * FROM pg_stat_subscription_stats;   -- apply_error_count

-- 冲突的处置路径:
-- 1. 定位冲突行(错误日志带 LSN 与表名)
-- 2. 决策:以发布端为准(删订阅端冲突行,让复制重放)或手工合并
-- 3. pg_replication_origin_advance 跳过已处理事务(谨慎!可能跳过正常数据)

预防冲突的硬设计:订阅端应用账号只读(ALTER DEFAULT PRIVILEGES 收权)+ DDL 变更流程强制"订阅端先行"+ 冲突告警(apply_error_count 增长即 P1)。逻辑复制的冲突不是"会不会"而是"何时"——防线建在流程上而不是指望运气。

六、坑清单

坑 现象 应对
订阅端被误写 复制冲突、数据分叉 只读设置 + 权限收敛
DDL 不同步 复制报错"列不存在" DDL 流程订阅端先行
序列不同步 提升为主后主键冲突 切换时 setval 对齐(按 max(id) 重置)
slot 堆积 发布端 WAL 爆盘 槽位监控 + 订阅端故障及时处理
无主键表 复制效率低甚至失败 被复制表强制主键(REPLICA IDENTITY)
心跳缺失 延迟不可见、误路由 心跳表 + 应用侧延迟路由

序列坑是切换时最经典的事故:逻辑复制不带序列状态,订阅端提升为主后 INSERT 用旧序列值撞主键——切换 checklist 里"按各表 max(id) setval"是不可省略的一步。

小结

逻辑复制做读写分离的定位是"特殊场景的解":大版本升级混跑副本、表级子集分发、跨平台查询副本;标准读写分离仍选物理复制。 三条运行纪律:订阅端严格只读(冲突的根源防线)、DDL 订阅端先行(Expand-Contract 流程)、心跳表驱动的延迟路由(一致性逃生通道)。故障切换按五步走并支持反向回退,切换时的序列 setval 是最容易漏的一步。逻辑复制的冲突处理没有银弹——防线建在流程与权限上,而不是指望冲突不发生。

读完了?给作者一点支持

本文采用 CC BY 4.0 协议转载 · © 半山听雨

评论(0)

登录 后参与评论。

  • 还没有评论,来抢沙发。

🔗 相关文章

Go 1.27 全面解读:泛型方法、内置 uuid 包与 encoding/json/v2

Go 1.27(2026 年 8 月发布)是近几代语言层面变化最大的一版:泛型方法落地、struct literal 键支持嵌套字段选择器、新标准库 uuid 包、encoding/json/v2 成为 v1 的实现底座。对生产代码的影响不在"能不能用新语法",而在哪些既有模式可以被替换。本文按升级决策顺序解读这版的关键变化与迁移注意。

8 小时前👍 0

Go 并发原语演进:structured concurrency 讨论、errgroup 模式与 sync 包新变化

Go 并发的哲学一直是"CSP 原语 + 手动纪律"。但社区对结构化并发(structured concurrency)的诉求持续升温——提案在 Go 官方仓库长期高关注,工具链里 golang.org/x/sync/errgroup 已是事实标准。同时 sync 包在近几版有低调但实用的变化(sync.Map 性能演进、OnceFunc/OnceValue/MustFunc 家族)。本文梳理 2026 年 Go 并发实践的正确形态:goroutine 生命周期管理模板、errgroup 的高级用法、以及"等提案不如立纪律"的取舍。

8 小时前👍 0

N-API 插件开发实战,从 C++ 到稳定 ABI 的完整路径

Node 的原生插件生态有一个常被误解的设计:N-API 从诞生起就承诺 ABI 稳定——同一份编译产物可以在不同 Node 版本间直接复用,不需要随版本重新编译。本文用一个完整的 C++ 示例走一遍 N-API 开发全流程,再对比 node-addon-api 封装层,最后给出分发策略的选型建议。

8 小时前👍 1