逻辑复制读写分离实战,订阅端的故障切换与流量编排
逻辑复制常被当 CDC 工具(第十五章逻辑订阅篇已讲数据分发),但它同样可以做读写分离的底座:订阅端拉起只读副本承接查询流量。与物理流复制相比各有取舍,本文讲清逻辑复制做读写分离的架构形态、冲突处理、故障切换,以及"什么时候该选它而不是物理复制"。
一、两种复制的读写分离取舍
| 维度 | 物理流复制 | 逻辑复制(订阅端只读) |
|---|---|---|
| 复制粒度 | 整个集群实例 | 表级/行级(可选子集) |
| 版本兼容 | 跨大版本受限(升级窗口约束) | 跨大版本、跨平台(8→9 升级期混跑) |
| DDL 同步 | 自动 | 不同步(订阅端要手工/工具维护 schema) |
| 序列与大对象 | 自动 | 不同步(应用侧规避) |
| 冲突处理 | 无(物理块级) | 有(订阅端可写时会冲突,需策略) |
| 典型用途 | 标准读写分离 | 升级混跑、跨版本查询副本、部分表分发 |
结论先行:标准读写分离用物理复制(简单可靠);逻辑复制做读写分离的真正战场是三个特殊场景——大版本升级期的"新版本查询副本"、只分发部分表的"数据子集查询"、以及跨机房/跨云的表级分发。
二、搭建:发布-订阅的读写分离形态
-- 主库(发布端,承接写)
CREATE PUBLICATION orders_pub FOR TABLE orders, order_items;
-- 订阅端(查询副本,承接读)
CREATE SUBSCRIPTION orders_sub
CONNECTION 'host=primary.demo port=5432 dbname=shop user=sub_user'
PUBLICATION orders_pub
WITH (copy_data = true, create_slot = true, enabled = true);
-- 订阅端强制只读(防应用误写导致冲突)
ALTER DATABASE shop SET default_transaction_read_only = on;
架构要点:
- 订阅端只读是纪律不是建议:逻辑复制冲突的根源就是订阅端被写入(主键冲突、行丢失),只读设置 + 权限收敛(订阅进程专用账号有写权限,应用账号只读)双保险;
- DDL 维护流程:主库 DDL 不会自动到订阅端——变更流程变成"先订阅端加列(兼容旧数据)→ 主库加列",与第十七章 Expand-Contract 同构;
- 过滤与变换:发布端可用
FOR TABLE ... WHERE(行过滤)只发部分数据,订阅端字段级裁剪要在发布端建专用发布实现。
三、延迟监控与一致性承诺
逻辑复制的延迟观测与物理复制不同,两套指标都要看:
-- 订阅端:追赶状态(pg_stat_subscription)
SELECT subname, received_lsn, latest_end_lsn,
latest_end_time - now() AS lag_time
FROM pg_stat_subscription;
-- 发布端:槽位堆积(slot 的 walfail 风险,vacuum 篇讲过过期 slot 危害)
SELECT slot_name, active, restart_lsn,
pg_size_pretty(pg_wal_lsn_diff(pg_current_wal_lsn(), restart_lsn)) AS retained_wal
FROM pg_replication_slots WHERE slot_type = 'logical';
-- 应用侧一致性水位:复制身份标记表(心跳表)
-- 主库每秒写心跳 → 订阅端读心跳时间戳 → 应用按"最大可容忍延迟"路由查询
心跳表模式是逻辑复制读写分离的实用件:应用写查询路由不信任"看起来同步",而是读副本上的心跳时间戳——心跳落后超过阈值(如 10 秒)就把强一致读自动切回主库。这是第十章"一致性逃生通道"在逻辑复制形态下的实现。
四、故障切换:订阅端提升为主的三步验证
逻辑复制拓扑里"订阅端提升为主"是可能的(表结构与数据都在),但要按流程走:
1. 停写主库(维护窗口),确认订阅端 LSN 追平(received_lsn == latest_end_lsn)
2. 订阅端 DROP SUBSCRIPTION(释放发布端 slot,防 slot 堆积拖垮旧主)
3. 订阅端解除只读(default_transaction_read_only=off + 应用账号提权)
4. 应用切换连接串(配置中心/网关路由,参考第七章热更)
5. 旧主恢复后以"反向订阅"身份回归(建反向发布-订阅),不直接写
反向订阅的对称性值得强调:切换后新旧角色对调,旧主作为订阅端追赶新主的数据——这保证切换是可回退的(出问题再对称地切回去),比"单向升级"安全得多。
五、冲突的预防与处理
即使订阅端严格只读,冲突仍可能来自运维误操作与边界场景:
-- 冲突的观察:订阅 worker 报错暂停
SELECT * FROM pg_stat_subscription_stats; -- apply_error_count
-- 冲突的处置路径:
-- 1. 定位冲突行(错误日志带 LSN 与表名)
-- 2. 决策:以发布端为准(删订阅端冲突行,让复制重放)或手工合并
-- 3. pg_replication_origin_advance 跳过已处理事务(谨慎!可能跳过正常数据)
预防冲突的硬设计:订阅端应用账号只读(ALTER DEFAULT PRIVILEGES 收权)+ DDL 变更流程强制"订阅端先行"+ 冲突告警(apply_error_count 增长即 P1)。逻辑复制的冲突不是"会不会"而是"何时"——防线建在流程上而不是指望运气。
六、坑清单
| 坑 | 现象 | 应对 |
|---|---|---|
| 订阅端被误写 | 复制冲突、数据分叉 | 只读设置 + 权限收敛 |
| DDL 不同步 | 复制报错"列不存在" | DDL 流程订阅端先行 |
| 序列不同步 | 提升为主后主键冲突 | 切换时 setval 对齐(按 max(id) 重置) |
| slot 堆积 | 发布端 WAL 爆盘 | 槽位监控 + 订阅端故障及时处理 |
| 无主键表 | 复制效率低甚至失败 | 被复制表强制主键(REPLICA IDENTITY) |
| 心跳缺失 | 延迟不可见、误路由 | 心跳表 + 应用侧延迟路由 |
序列坑是切换时最经典的事故:逻辑复制不带序列状态,订阅端提升为主后 INSERT 用旧序列值撞主键——切换 checklist 里"按各表 max(id) setval"是不可省略的一步。
小结
逻辑复制做读写分离的定位是"特殊场景的解":大版本升级混跑副本、表级子集分发、跨平台查询副本;标准读写分离仍选物理复制。 三条运行纪律:订阅端严格只读(冲突的根源防线)、DDL 订阅端先行(Expand-Contract 流程)、心跳表驱动的延迟路由(一致性逃生通道)。故障切换按五步走并支持反向回退,切换时的序列 setval 是最容易漏的一步。逻辑复制的冲突处理没有银弹——防线建在流程与权限上,而不是指望冲突不发生。
评论(0)
登录 后参与评论。