读写关注:
在速度与一致性之间拧旋钮
在副本集里,一次写入先落在主节点,再异步复制给其他成员。"写成功"到底意味着什么?"读到的是不是最新"又由谁决定?答案分别藏在 writeConcern、readConcern 和读偏好(read preference)这三个设置里。这篇文章讲清它们各管什么、怎么组合,以及哪些场景该用哪一档。
示意:标记的位置表示相对的保证强度与延迟,不是精确度量
因为复制是异步的,故障是会发生的
如果数据库只有一个节点,"写成功"就是写成功。副本集多了几个成员,问题就来了:写到了哪里才算数?读的又是哪里?
写到哪才算数?
只写到主节点就返回,速度最快。但如果主节点在数据复制出去之前下台,这次写入可能被回滚。
读到的会被回滚吗?
默认读到的是该节点上的数据,不保证已经写到多数派。这样的数据同样有被回滚的可能。
该读哪个节点?
读从节点能分担主节点压力,但从节点可能落后。读偏好决定请求发往谁,也决定了读到旧数据的风险。
官方文档里有一句提醒:无论使用哪个读关注级别,某个节点上的最新数据,未必就是整个系统里的最新版本。一致性不是开关,而是一组需要权衡的旋钮。
w、j、wtimeout:三个字段,三件事
写关注的形式是 { w: <值>, j: <布尔>, wtimeout: <毫秒> }。
需要多少成员确认
要求写入已经传播到指定数量的 mongod 实例,或者带有指定标签的实例。
是否已写入磁盘日志
要求写入已经落到磁盘上的 journal。它本身并不能防止故障切换时的回滚。
最多等多久
防止写入无限期阻塞的时间上限(毫秒)。注意:超时只返回写关注错误,不会撤销已经成功的数据修改。
settings.getLastErrorModes 里定义的规则
适合跨机房、按标签要求确认
多数部署默认是 majority
隐式默认写关注是 w: "majority"。例外:当存在仲裁节点,且非仲裁节点数不超过投票成员的多数时,默认是 { w: 1 }。官方例子:2 个非仲裁节点 + 1 个仲裁节点,默认 w: 1;4 个非仲裁节点 + 1 个仲裁节点,默认 "majority"。
majority 的确认时机提前了
从 MongoDB 8.0 起,{ w: "majority" } 在多数派把 oplog 条目持久写入之后就返回确认;此前要求成员已经应用了这次写入。5.0 起,处于 STARTUP2 状态的成员不参与写多数派。
一是 Primary-Secondary-Arbiter 这类拓扑:计算出的多数派等于数据承载的投票成员数,只要有一个数据节点挂了,"majority" 写入就可能超时,官方建议避免这种拓扑配 majority 写。二是没有设置 wtimeout 时,无法满足的写关注会一直阻塞,务必给关键写入配上超时。
五个级别,保证逐级变强
读关注控制从副本集和分片集群读到的数据有多"确定",以及事务内的隔离程度。默认级别是 local。
maxTimeMS
// 写入:多数派确认,最多等 5 秒 db.orders.insertOne( { orderNo: "A1001", amount: 99 }, { writeConcern: { w: "majority", wtimeout: 5000 } } ) // 读取:只读多数派已确认的数据 db.orders.find({ orderNo: "A1001" }) .readConcern("majority")
db.locks.find({ _id: "job-42" })
.readConcern("linearizable")
.maxTimeMS(10000)
db.adminCommand({
setDefaultRWConcern: 1,
defaultWriteConcern: { w: "majority" },
defaultReadConcern: { level: "majority" }
})
多数文档事务里要在事务级别设置读写关注,而不是在单个操作上:在集合或数据库级别设置的读关注,在事务内会被忽略。事务支持 local、majority 和 snapshot。
请求发给谁,也是一致性的一部分
读偏好决定读请求被路由到哪个成员。它和读关注是两件事:前者选"读谁",后者选"读到什么程度的数据"。
只读主节点
默认模式。数据最新,但所有读都压在主节点上。
优先主节点
主节点可用就读主节点,不可用时回退到从节点。
只读从节点
分担主节点压力,但可能读到落后的数据。
优先从节点
优先读从节点,没有可用从节点时回退到主节点。
延迟最低的成员
不区分主从,选网络延迟最低的成员,适合跨地域读。
从节点是异步复制的,刚写入的数据可能还没到。读从节点前,要清楚业务能容忍多大的延迟,可以用 maxStalenessSeconds 限制从节点允许落后的程度。另外,两个节点可能短暂地同时认为自己是主节点,此时连着旧主的客户端即使用 primary 也可能读到过期数据,它的新写入最终也会被回滚。
"读到自己刚写的",怎么保证
一个常见的需求:用户刚提交了订单,刷新页面必须看到它。如果这次读恰好落在还没同步的从节点上,用户就会以为订单丢了。
用因果一致的会话把读写串起来
在因果一致的会话里,驱动会自动为读操作带上 afterClusterTime,让读操作等到数据追上之前的写入。要获得这个保证,读和写都要使用 "majority"。
并非所有读关注都能用
因果一致性会话支持 local、majority、snapshot;available 和 linearizable 不能使用。
// 开启因果一致的会话 const session = db.getMongo() .startSession({ causalConsistency: true }) const orders = session.getDatabase("shop").orders // 写:多数派确认 orders.insertOne( { orderNo: "A1002", amount: 59 }, { writeConcern: { w: "majority" } } ) // 读:同一会话、majority,可以读从节点 orders.find({ orderNo: "A1002" }) .readConcern("majority") .readPref("secondary") session.endSession()
官方文档明确指出:在 { w: "majority" } 确认之后,立刻去从节点查询,不一定能看到这次修改。想保证看到,就要用因果一致的会话。
一致性不是越强越好,而是够用就好
每一档更强的保证,都要用延迟或可用性来换。下面是一份通用的选型思路,请结合自己的业务容忍度调整。
maxStalenessSeconds 控制落后程度
maxTimeMS
一旦决定读从节点,复制延迟就成了必须盯住的指标:延迟升高,意味着从节点上的数据更旧,读到过期数据的概率随之变大。复制延迟、成员状态这类指标,正是 WAP 监控和告警模块持续关注的对象。
