三库副本集群:HA、连接心智与读写分离别混谈

Hello,我是小兔大白糖。 「上了集群」常被当成一件事办完。联调时才发现:刚写下的单读不到、failover 后连接池还握着旧主、同事把「有从库」当成「核心读该拆」。
写成这篇,给要做 MySQL / PostgreSQL / MongoDB 副本与高可用选型调研 的初中级后端同学:钉的是业界常见连接心智与边界,不是某云规格书,也不是某项目怎么改 DataSource 的工单。
说明:文中路径、数字与伪流程均为教学脱敏 / 示意。产品名与参数只写公开文档可核对的概念;不编造「某厂官方内部就是这样」。同站已有 Mongo 读偏好深文——本文只给三库总览,细节见文末导航。
估计阅读时间:11 分钟
目录
- 为什么现在要关心
- 心智模型:订房、柜台与高速公路
- 问题空间:四个目标别揉成「上了集群」
- 三套拓扑一眼
- 应用怎么连:本文最重要的差异
- 读写分离:要不要做
- Failover、脑裂与进行中的写
- 一致性对照:概念相近,参数不等价
- 可观测:卡死看实时,事后看采样
- 反模式
- 选型结论
为什么现在要关心
硬规则先说清三条:HA ≠ 读扩展 ≠ 写扩展;三库「应用怎么连」差很多;读写分离不是默认最佳实践。
现场里「支持集群」这句话,常常混了四类不同目标:
| 你以为在办 | 实际在动的旋钮 |
|---|---|
| 「主挂了还能写」 | 自动选主 / failover / 多数派 |
| 「机器坏了少丢数」 | 多副本同步或异步复制 |
| 「读太多拆出去」 | 副本可读 + 路由策略 |
| 「单主写打满」 | 分片 / 分库分表——与副本 HA 正交 |
更要命的是连接侧:Mongo 副本集常见「一个 URI + 驱动发现拓扑」;MySQL / PostgreSQL 常见「主地址 +(可选)从地址或代理」。把三者当成同义词,才会在联调里撞上读己之写失败、池子握旧主。
心智模型:订房、柜台与高速公路
主比喻三条,各管一块,不要串用。
| 比喻 | 对应什么 | 解释得了 | 解释不了 |
|---|---|---|---|
| 订房(HA) | 主挂了换一间还能入住 | 「写入口能否恢复」 | 读是否该打副本、写是否该水平扩展 |
| 柜台记账本 vs 复印本 | Primary / 主库 vs Secondary / 从库 | 写落点、读可能滞后 | 选主窗口——柜台暂时没人,复印本救不了写 |
| 高速公路分道(读扩展) | 只读流量旁路 | 主被只读压满时的旁路减负 | 慢查询 / 缺索引——拆道不治堵因 |
类比局限一句钉死:订房管调度与恢复;柜台本管写落点与陈旧度;分道管读压力。 三者都解释不了「客户端超时后那次写到底成功没有」——那是幂等与观测的问题。
问题空间:四个目标别揉成「上了集群」
先问「我要的是换主、少丢数、拆读,还是水平写」;答错题,后面配什么拓扑都像在治错病。
| 目标 | 含义 | 常见手段 |
|---|---|---|
| HA(高可用) | 主挂了尽快恢复写 | 自动选主、failover、多数派法定人数 |
| 冗余持久性 | 降低单机毁损丢数 | 多副本同步 / 异步复制 |
| 读扩展(可选) | 读分摊到副本 | 副本可读 + 应用或代理路由 |
| 写扩展(正交) | 突破单主写天花板 | 分片 / 分库分表 / Citus 等 |
边界再钉三句:
- 有 Secondary / 从库 ≠ 核心读就该打过去。
- 在线副本 ≠ 冷备份 / PITR(时间点恢复)。
- HA 三节点 ≠ 水平写扩展。
云托管常把选主与备份封装掉,但复制延迟、读己之写、超时后写是否成功,仍是应用语义——托管替不了你在业务层做选择。
三套拓扑一眼
三者都能做 HA;读入口与写扩展入口别混进同一句话。
| MySQL | MongoDB | PostgreSQL | |
|---|---|---|---|
| 复制主线 | binlog 主从;亦可 Group Replication / InnoDB Cluster | Replica Set(oplog) | 流复制 + WAL |
| 选主 | 历史上常见 MHA / Orchestrator;现今多见云或 GR / InnoDB Cluster | 协议内选举 | 社区核心发行版本身不自带完整自动选主;常见 Patroni + DCS,或云托管封装 failover |
| 读扩展入口 | ProxySQL / 多 DataSource / 只读 endpoint | readPreference(读偏好) | 只读 URL / Pgpool / 云只读 endpoint |
| 写扩展另议 | 分库分表 | Sharding(每 shard 仍是一个 RS) | Citus / 分区 / 业务分片 |
Mongo 再补一句硬边界:Replica Set 解决 HA;Sharding 解决写与数据量水平扩展——每个分片通常仍是一个副本集。Secondary 可读,不等于「只能当备份机」。
PostgreSQL 自建侧:选主常见 Patroni;连接侧常见 PgBouncer(连接池)挡在应用与库之间——池与选主是两层,别当成一个开关。托管 PG 能做 HA,不等于「原生流复制 alone 就自动帮你完整选主」。
应用怎么连:本文最重要的差异
人话结论:MySQL / PG 家族多是「主地址 +(可选)从 / 代理」;Mongo 副本集把拓扑发现收进官方驱动,一个连接串是常态。
MySQL / PostgreSQL 家族
- 配置写 URL + 可选读 URL;或单一入口,由代理按规则分流。
- 同一接口又读又写:写与「读己之写」钉主;事务常整段粘主。
- 心智:历史是
host:port+ 中间件;拓扑发现不是 JDBC / 常见驱动的默认中心能力。
MongoDB
- 推荐
mongodb+srv://(或带replicaSet=的标准 URI)。 - 禁止把某个 Secondary 主机名写死成「长期从库 URL」。
- 默认
readPreference=primary:读写都打 Primary。 - 心智:协议 + 官方驱动把「谁是主、怎么重连」做成一等职责 → 一个连接串是常态。
对照表
| 维度 | MySQL | MongoDB | PostgreSQL |
|---|---|---|---|
| 典型配置 | 多 URL / 代理 | 一个 RS / SRV | 主 + 可选备 / 代理 |
| 拓扑发现 | 弱(靠中间件或云 DNS) | 驱动内建 | 有限(多 host / 托管 endpoint) |
| 默认读落点 | 看框架与配置 | primary | 通常主库 |
| 写重试 | 应用 / 中间件 | retryWrites(仍要业务幂等;默认是否开启随驱动版本 / URI 而异,以目标驱动文档为准) | 应用 |
不是 Mongo「不能像 MySQL 配多从库」,而是把 MySQL 里常手写的路由,收进了官方 driver。需要时仍可以两个 MongoClient(例如一个钉 primary、一个 secondaryPreferred),但不要绑死节点 hostname。
读偏好参数怎么选、弱读声明落在哪一层——同站另有深文,本文不展开成第二篇 readPreference 手册。
读写分离:要不要做
默认:写 + 需要 read-your-writes(读己之写)→ 打主;报表 / 可滞后读再拆。分离不是免费午餐。
| 适合拆读 | 不适合拆读 | |
|---|---|---|
| 信号 | 主被只读压满;接受滞后;有 lag 监控与回退开关 | 下单后立刻读订单;余额 / 权限 / 状态机;用拆读掩盖慢 SQL |
| 代价 | replication lag(复制延迟);偶发读己之写失败 | —— |
| 误判 | 「有从库就该拆」 | 「拆了就等于强一致」 |
清单(选型页可贴顶):
- 瓶颈已证明是主上的只读压力,不是缺索引 / N+1。
- SLA 允许「旧一点」。
- 有延迟监控与告警。
- 有一键回退打主。
- 强一致路径钉主,不继承弱读默认。
Mongo 侧再钉一句:加强写确认(如 majority writeConcern)不是「免费在从库上读到强一致」。Concern 管写入确认范围;读落点仍由 preference 与产品语义决定。
Failover、脑裂与进行中的写
选主之后,应用侧合同是:丢掉坏连接、发现新写入口;超时的那次写,默认按「至少一次」做幂等,不要假设恰好一次。
| MySQL | MongoDB | PostgreSQL | |
|---|---|---|---|
| 选主谁做 | 工具 / 云 / Group Replication | 成员投票(多数派) | Patroni / 云 |
| 应用要做什么 | 重连写地址或经代理拿新主 | 驱动发现新 Primary | 重连主 endpoint;丢弃坏连接 |
脑裂(split-brain)边界人话:
- Mongo:靠多数派法定人数,少数派不能随便升主。
- 异步 MySQL:错误双提升危险——两边都以为自己是主。
- Patroni:必须能 fence(隔离)旧主,避免双写。
客户端超时 → 你不知道成功与否 → 至少一次投递 + 业务幂等。retryWrites 减轻的是驱动层可重试写;它不能替代订单号 / 幂等键一类业务合同。
一致性对照:概念相近,参数不等价
加强写确认降 RPO(恢复点目标)、抬延迟;关键读打主才容易读己之写——不要把三库参数当成「同一旋钮改个名」。
| 意图 | MySQL 常见说法 | MongoDB | PostgreSQL |
|---|---|---|---|
| 写多确认几份再返回 | semi-sync 等 | writeConcern(如 majority) | sync standby / 同步备 |
| 读尽量新 | 打主 | readPreference=primary | 打主 |
| 读可旧换余量 | 打从 / 代理规则 | secondaryPreferred 等 | 只读 endpoint / 代理 |
上表是教学对照「加强写确认 / 读落点」意图,不是参数一一等价,也不可按列名直接换名迁移。加强写侧确认:RPO 更好看,延迟与可用性窗口更紧。关键读打 Secondary / 从库:就接受滞后可见——产品语义优先于「技术上能拆」。
可观测:卡死看实时,事后看采样
正在卡死:看实时会话视图;已经结束:看慢日志 / 采样统计。 各家云控制台的「Top operations」类榜单,排障经验上多偏已完成且采样的操作——这是跨产品归纳,不是某一控制台官方逐字定义;若要钉死某产品行为,以该产品公开文档为准。
| 场景 | 看什么(公开常见入口) |
|---|---|
| 正在卡 | MySQL PROCESSLIST;Mongo currentOp;PG pg_stat_activity |
| 已经结束 | 慢日志;Mongo profiler;PG pg_stat_statements |
被 kill 掉的长查询,未必进「Top」榜。排障时先问:我看的是当时现场,还是事后均值?
反模式
从架构视角看,下面几条会把「上了集群」用成「假装解决了可用与正确性」。
-
Mongo 写死 Secondary IP / 主机名当从库 URL
角色会变;绑死节点等于自己关掉驱动发现。 -
高延迟副本扛核心读,且无 lag 告警
用户看到的是错账窗口,不是「读扩展成功」。 -
用 R/W 分离掩饰慢 SQL / 缺索引
火力从主挪到从,两边一起热。 -
事务内读从库却假设强一致
合同自相矛盾;读己之写必炸。 -
Failover 后连接池仍握旧主
选主成功了,应用层还在对尸体说话——要丢坏连接、刷新写入口。 -
把分片当 HA,或把 HA 副本当写扩展
维度正交;混谈会选错拓扑。
选型结论
- 三个正交目标先分清:HA、冗余持久性、读扩展;写扩展另开一题。
- 连接心智对照:MySQL / PG 常是主 +(可选)从 / 代理;Mongo RS 常是单 URI + 驱动发现,默认打 primary。
- 读写分离有代价:默认写与读己之写钉主;可滞后路径再拆,并配监控与回退。
- Failover 合同:重连 / 发现新主 + 至少一次幂等;别假设超时等于失败或成功。
- 先做对连接、failover、幂等与观测,再谈拆读与跨地域。
| 场景 | 选型起点(业界常见归纳) |
|---|---|
| 关系模型、强事务 | 托管 MySQL / PG HA;读写先走主 |
| 文档模型、预期水平扩展 | 托管 Replica Set;单一 SRV;默认 primary;真不够再分片 |
| 从「多 DataSource」迁到 Mongo | 不要惯性再配「从库 URL」 |