OC

每一次“快速写入”都把工作推去了别处:数据库成功返回到底承诺什么
科技 · 2026-08-10 · 开发者生态 · 阅读 1

每一次“快速写入”都把工作推去了别处:数据库成功返回到底承诺什么

作者:林岚|OC 开发者生态编辑

作者:林岚|OC 开发者生态编辑

开发者 Shayon Mukherjee 在文章 《Every fast write moves work somewhere else》 ,从一次键值写入出发,比较内存页缓存、本地 SSD、对象存储和复制日志的不同成功语义。核心提醒很朴素:延迟下降通常意味着系统在更早的位置返回,把耐久性、复制或清理留到之后。

一句话结论:数据库“写入成功”没有脱离故障模型的统一含义;1 毫秒和 7 毫秒只有在说明数据此时位于哪里、能承受哪种故障、剩余工作由谁完成后才可比较。

在 Linux 上,write() 返回通常只代表字节进入页缓存,进程退出不会丢掉这些缓存,但内核崩溃或机器断电仍可能丢失尚未落盘的数据。fdatasync() 会等待文件数据和恢复所需元数据写到设备;fsync() 还覆盖更多元数据。使用 O_DIRECTio_uring 可以改变 I/O 路径和提交效率,却不会让未同步写入自动获得耐久性。

本地 NVMe 上的 WAL 可以很快。数据库先按顺序追加变更,等待一次同步,再向客户端返回。多个请求还可以共享一次 flush,提高吞吐。但此时最新数据只有一台主机的一块盘;如果主机在上传远端副本前永久丢失,已经看到“成功”的客户端仍可能失去数据。

不同成功点对应进程崩溃主机丢失和节点故障的不同保证

把成功点移到对象存储之后,可以获得独立于数据库主机的副本,代价是网络往返和对象服务确认。把 WAL 复制到三台服务器并等待两台持久化,可以承受一台节点故障,代价则包括网络、第二次磁盘同步、领导者选举、日志修复和成员变更。健康路径的延迟只展示了最容易的一段,恢复工作不会消失。

批处理也不是免费提速。100 个写入共用一次同步或一个对象请求,能大幅减少 IOPS 和请求费,但最早到达的请求要等待批次闭合,错误会影响整批,重试也会传输更多数据。若后台上传、压缩和垃圾回收没有队列上限,所谓快速写入只是把拥堵藏到越来越长的欠账里。

还有一个常被忽略的歧义:服务端已经持久化,网络却在响应到达客户端前断。客户端不知道操作成功还是失败。更快硬件不能消除这个窗口,需要幂等操作 ID,让相同请求安全重试,并拒绝同一 ID 搭配不同内容。

这就是为什么 Big O 也不够。三种 PUT 都可能是 O(key bytes + payload bytes),但一次本地 flush、一次远程 HTTP 确认和多数副本落盘的固定成本完全不同。性能报告必须把成功点、百分位和故障保证写在同一张表上。

关键事实

  • write()、本地 fdatasync()、对象存储确认和多数副本确认承诺不同
  • Group commit 用一次真实 flush 覆盖多个写入,提高吞吐但增加批次等待
  • 本地 WAL 降低前台延迟,却会引入主机丢失前的未上传窗口
  • 幂等操作 ID 用于处理服务端已提交但客户端未收到响应的歧义

OC 判断

“快 50 倍”经常是真的,也经常少说了最重要的半句:快在哪个成功点。数据库设计先要写出允许丢什么、允许停多久、谁负责恢复,再谈用 LLM 快速生成上传器或复制日志。代码可以生成,故障承诺不能含糊。

为什么重要

  • 对数据库开发者:API 文档必须定义成功、超时、重试和崩溃后的状态。
  • 对架构师:延迟基准应与故障域、复制点和后台欠账共同评审。
  • 对业务团队:更低写入延迟可能换来更高数据丢失窗口或恢复复杂度。

参考来源

相关阅读

基于标题、摘要和正文内容自动匹配。

更多科技

评论

围绕这篇文章补充信息、提出问题或分享观察。

0
暂无评论。

发表评论

继续看看 OC 用户围绕这个话题说了什么、做了什么。

相关帖子

更多

你们的Codex额度提前耗完了没?戒断反应如何?

<p>我在第三天就消耗了只剩1%,忍了一天,然后今天干脆用这最后的1%,开着5.6 Sol 极高 强推我一个提示词笔记本应用的功能落地。最终用时3小时,居然还是跑完了。但是现在还是出现一些戒断反应,感觉啥也做不了,就无精打采的,困。</p> <p>我做了一个Prompt Notebook,专门用来收藏或者记录自己手搓的生图提示词。带Chrome一键收藏插件。支持AI优化提示词。支持提示词中提取常用字段作为提示词百科词汇。也自带生图功能用来测提示词。但是要搭配Cloudflare R2+Worker的图床。</p> <p>今天主要是做一个AI模特的资产库。将常用的AI模特固定下来,进行身份设定,以及模特的一些角色定妆图。之后生图可以直接调用AI模特自动作为垫图。</p> <p>这是AI模特资产库的界面: <img src="/upload/thread/202608/42b5f73e-938f-45de-b74e-da69da9d72a8.webp" alt="1bb0d28b-c7dd-4327-bafa-26b60323cbed" /> 这是主界面的提示词瀑布流,支持关键词或标签搜索: <img src="/upload/thread/202608/3e15b6e7-345f-48b4-aeff-1bbd89afe9d3.webp" alt="ab998e2f-9ccc-4173-832f-223aa6c6fa81" /> 这是提示词笔记的预览界面,可以复制提示词,分享提示词,点击分享还有分享短链:(https://prompt.jintao.co.uk/share/20260806LfsmY) <img src="/upload/thread/202608/bab31972-0468-4582-b873-6309233254a6.webp" alt="20260806-201213" /> 可惜现在没额度了,我又不想换模型折腾。现在还有些界面细节和小功能需要落地完善,可能还要虫子要抓。弄好了,打算放GitHub开源。</p> <p>有朋友想试试的么?</p>

shynloc 2 4

重返OurCoders

<p>从2014年以来好久没逛过这个谈论了,不知道这个谈论的运营现在怎么样,开发人员是不是原来的人,前端UI做得不太好</p>

梁建溢 4 18

你为什么不移民?

<p>我是一定要移了,在这里连正常呼吸都不行了。以前正常呼吸指的是言论自由,现在是生物学意义的正常呼吸问题了。</p> <p>你为什么不移民?</p>

tinyfool 740 15

测试OurCoders能否发布照片

<p>今天小区的彩虹🌈<img src="https://share.icloud.com/photos/0ebtFydNy8r_gJETON61u4Ybg" alt="图片说明" /></p> <p>看来不能直接发照片,可以把iCloud Link的功能派上用场!</p>

梁建溢 15 45