OC
Shopify 用 MySQL 替换 Redis 做库存预留:真正的瓶颈不是数据库
科技 · 2026-08-09 · 开发者生态 · 阅读 18

Shopify 用 MySQL 替换 Redis 做库存预留:真正的瓶颈不是数据库

作者:林岚|OC 开发者生态编辑

作者 林岚 林岚

Shopify 在工程博客中披露,公司已经把结账环节的库存预留系统从 Redis 迁移到 MySQL,并在 2025 年黑色星期五的真实流量中完成验证。

一句话结论:这不是“MySQL 打败 Redis”,而是 Shopify 发现库存预留首先是一个需要跨步骤保持一致的事务问题;当数据模型、锁和连接池都设计正确时,少一个分布式状态源比多一个看起来更快的缓存更重要。

库存预留发生在买家点击付款之后、支付真正成功之前。系统要短暂锁住商品,避免两个买家同时买走最后一件;支付成功后再把预留变成正式扣减。做慢了会拖住结账,做错了则要么超卖,要么把还有库存的商品显示成售罄。

原系统用 Redis 的 DECRINCR 处理并发并不困难。问题在于,预留状态在 Redis,正式库存账本在 MySQL。支付成功时,系统既要修改 MySQL,又要清理 Redis,但两套数据库无法放进同一个本地事务。只要中间一步失败,就可能出现钱收到了但库存没扣,或者库存扣了但预留还没释放。

Shopify 的新方案没有把所有数量塞进一行。它把每个可售库存单位建成一行,再用 MySQL 8 的 SELECT ... FOR UPDATE SKIP LOCKED 取得尚未被其他事务锁住的行。预留三个单位,就在一次事务中移动三行。MySQL 官方文档也明确说,SKIP LOCKED 会跳过已锁定记录,适合多个会话并发消费队列式表,但它返回的并不是一致视图,因此不适合随意套在一般查询上。

库存单位行通过 SKIP LOCKED 被并发结账事务领取

一行一个库存,会不会把表撑爆

会,所以 Shopify 没有把商家的全部库存都展开。每个“商品与地点”组合只维护最多 1000 个可预留行,后台持续从库存账本补充。极端抢购耗空池子时,由一个事务负责补货,其他请求等待,避免同时插入造成惊群。

工程细节比数据库品牌更关键。团队把过滤字段放进复合主键,减少二级索引和聚簇索引的重复加锁;把相关事务从默认的 REPEATABLE READ 调整到 READ COMMITTED,绕开空池补货时的间隙锁;统一多张表的加锁顺序,减少死锁;购物车多商品则用 UNION ALL 合并往返。

但上线压测后,真正限制吞吐量的不是查询,也不是 CPU,而是连接。Shopify 给 SQL 加上业务调用方标签,并在 ProxySQL 汇总连接持有时间,才发现结账链路的其他代码长期占用连接。清理之后,主库读取量减少 50%,事务数减少 33%;高流量闪购中,写库 CPU 仍低于 50%,读库低于 16%。

这解释了为什么“换数据库”常常只是故事的前半段。单条查询很快,不代表整条业务链路能扩展。连接池、事务边界、锁顺序和旁边服务的行为,可能比 SQL 本身更早把系统压垮。

这意味着可以删掉 Redis 吗

先别急着激动。Shopify 迁移的是一种特定工作负载:短事务、强一致、有限数量的互斥领取,而且库存账本本来就在 MySQL。Redis 仍然适合缓存、限流、短期状态和对延迟极敏感但允许其他一致性方案的场景。

真正可复用的经验是重新核算系统边界。五年前为了性能拆出的专用存储,在数据库能力和硬件变化后,可能已经不再值得承担双写、补偿和运维成本。反过来,如果把所有流量重新塞回关系数据库,却没有观测锁、连接和事务持有时间,只是把分布式故障换成集中式故障。

Shopify 也没有直接切换。它先让 Redis 和 MySQL 双写,以 Redis 继续作为事实来源,对比真实生产结果;确认正确性和吞吐量后,再按低流量到高流量逐步切换,并保留回退开关。这套迁移方式,比“我们压测通过了”更值得抄。

关键事实

  • Shopify 称 2025 年黑色星期五峰值销售额达到每分钟 510 万美元,每笔涉及库存的结账都会经过预留系统
  • 新方案用 MySQL 8 的 SKIP LOCKED 并发领取库存单位行,并让预留与库存账本进入同一 ACID 事务
  • 每个商品和地点组合的可用行池上限为 1000,避免按全部库存无限扩表
  • 团队最终发现吞吐瓶颈主要来自数据库连接被其他结账流程长期占用,而不是预留查询本身

OC 判断

这次迁移最有价值的不是技术栈站队,而是把“性能问题”重新定义成“正确性与共享资源问题”。Redis 很快,但跨 Redis 和 MySQL 的业务动作并不会自动原子化;MySQL 能扛住流量,也建立在精确的数据模型、锁策略、连接观测和渐进切换之上。

为什么重要

  • 对开发者:评估缓存或专用队列时,要把补偿逻辑、双写和连接占用一起计入复杂度。
  • 对架构团队:低 CPU 与高排队同时出现时,应先观察连接持有者和完整事务路径。
  • 对商家:库存一致性不是后台洁癖,它直接决定超卖、误售罄和结账成功率。

参考来源

相关阅读

基于标题、摘要和正文内容自动匹配。

更多科技

评论

围绕这篇文章补充信息、提出问题或分享观察。

0
暂无评论。

发表评论

继续看看 OC 用户围绕这个话题说了什么、做了什么。

相关帖子

更多

做 AI 语音产品时,授权、撤回和审计日志应该怎么落地?

<p>最近看到越来越多关于声音授权的讨论。对开发者来说,真正麻烦的往往不是“模型能不能模仿”,而是授权如何进入系统、生成结果如何追溯,以及授权撤回后该怎么办。</p> <p>我们在做 FlowSpeech 时也碰到过类似问题。我的体会是,不要把“用户勾选过同意”当成一个布尔字段,而应该把它做成一组可以审计的业务对象。</p> <h2>1. 把声音资产和授权分开</h2> <p>声音文件只描述技术属性,例如哈希、上传者、存储位置和创建时间。授权记录则至少要包含授权主体、用途范围、地域、有效期、来源证据和当前状态。这样同一份声音用于个人试听、商业广告、公开播客时,可以绑定不同的授权,而不是共用一个模糊的 consent=true。</p> <h2>2. 每次生成都保存授权快照</h2> <p>生成任务不要只引用当前授权 ID。授权内容以后可能变更,如果任务只查最新状态,历史结果就无法解释。更稳妥的做法是在任务创建时保存授权版本、文本哈希、声音版本、模型版本和操作者。生成出的音频再记录 artifact_id,并反向关联任务。</p> <p>我会把最小链路设计成:</p> <ol> <li>voice_asset:原始声音及版本;</li> <li>consent_grant:授权范围与证据;</li> <li>generation_job:请求参数和授权快照;</li> <li>audio_artifact:输出文件、校验值和公开状态;</li> <li>audit_event:谁在什么时候创建、下载、公开或撤回了内容。</li> </ol> <h2>3. 撤回不是简单删除一行</h2> <p>授权撤回后,系统至少要阻止新任务,并把相关公开音频进入下架队列。已经交付给客户的文件是否能删除,要按照合同和产品能力区分,不能在界面上承诺技术上做不到的“全球删除”。更现实的状态机是 active、suspended、revoked、expired,并明确每个状态允许哪些动作。</p> <h2>4. 对外展示也要可验证</h2> <p>除了后台日志,公开音频最好带上来源标记或可查询的生成记录。水印不是万能方案,但“可识别的音频 + 可验证的元数据 + 清晰的举报入口”组合起来,比一句“AI 生成”更有用。</p> <p>我们现在做的 <a href="https://flowspeech.io/zh">FlowSpeech</a> 主要解决上下文感知、情绪和停顿控制。越往产品化走,越觉得声音效果只是前半程,权限边界和可追溯性才决定这类工具能不能长期使用。</p> <p>大家在实际项目里会把授权证据放在业务数据库、对象存储,还是单独的审计系统?如果授权撤回,你们通常怎么处理已经生成并交付的音频?</p>

FlowSpeech 0 1

你们的Codex额度提前耗完了没?戒断反应如何?

<p>我在第三天就消耗了只剩1%,忍了一天,然后今天干脆用这最后的1%,开着5.6 Sol 极高 强推我一个提示词笔记本应用的功能落地。最终用时3小时,居然还是跑完了。但是现在还是出现一些戒断反应,感觉啥也做不了,就无精打采的,困。</p> <p>我做了一个Prompt Notebook,专门用来收藏或者记录自己手搓的生图提示词。带Chrome一键收藏插件。支持AI优化提示词。支持提示词中提取常用字段作为提示词百科词汇。也自带生图功能用来测提示词。但是要搭配Cloudflare R2+Worker的图床。</p> <p>今天主要是做一个AI模特的资产库。将常用的AI模特固定下来,进行身份设定,以及模特的一些角色定妆图。之后生图可以直接调用AI模特自动作为垫图。</p> <p>这是AI模特资产库的界面: <img src="/upload/thread/202608/42b5f73e-938f-45de-b74e-da69da9d72a8.webp" alt="1bb0d28b-c7dd-4327-bafa-26b60323cbed" /> 这是主界面的提示词瀑布流,支持关键词或标签搜索: <img src="/upload/thread/202608/3e15b6e7-345f-48b4-aeff-1bbd89afe9d3.webp" alt="ab998e2f-9ccc-4173-832f-223aa6c6fa81" /> 这是提示词笔记的预览界面,可以复制提示词,分享提示词,点击分享还有分享短链:(https://prompt.jintao.co.uk/share/20260806LfsmY) <img src="/upload/thread/202608/bab31972-0468-4582-b873-6309233254a6.webp" alt="20260806-201213" /> 可惜现在没额度了,我又不想换模型折腾。现在还有些界面细节和小功能需要落地完善,可能还要虫子要抓。弄好了,打算放GitHub开源。</p> <p>有朋友想试试的么?</p>

shynloc 2 4

奉劝大家不要移民了

<p>对于大多数人而言,移民就是悲剧。实在看不下去了,大家不要往火坑里面跳。 国内发展那么快,你出国去慢车道,消费又高,又存不下钱,又要拼命适应当地环境,何苦? 老老实实在大城市找工作,根据收入买房子上车就好。</p> <p>补充:大城市觉得房价太高太辛苦,就好好学好英语,美国远程回老家省会城市,拿同比一线的收入,三线城市的开销,岂不美哉?</p> <p>转文章: <a href="https://mp.weixin.qq.com/s?__biz=MzAxNTMxMTc0MA==&amp;mid=2651016481&amp;idx=1&amp;sn=6bde227438ea02e3da3673295821692e&amp;chksm=80721b32b705922448a9f8645e8d1a8450e57151b71e58beb64e0addf9485ad0b256a431d68b&amp;mpshare=1&amp;scene=1&amp;srcid=0530QgwbtdDlMP4ZG7Nkonpo&amp;pass_ticket=bz%2FdHaz2YWQrgwhgQlVVXt866SMnyXU53Dd0OzDmMc1uZeu0PqND%2FjdQ6fQk8Bdl#rd"> 中产阶级的地雷阵 #D03 </a></p> <p>更多文章:<a href="https://mp.weixin.qq.com/s?__biz=MzAxNTMxMTc0MA==&amp;mid=503532389&amp;idx=1&amp;sn=84ff5eefb88e1b17f9ec0efb0238140d&amp;chksm=00721d76370594601903172e49477ce0ed149a3ba1bdcb88a300b55c8c552a79ea31134216ae&amp;mpshare=1&amp;scene=1&amp;srcid=0719VQx1dNX5rlraUqjWtCFm&amp;pass_ticket=bz%2FdHaz2YWQrgwhgQlVVXt866SMnyXU53Dd0OzDmMc1uZeu0PqND%2FjdQ6fQk8Bdl#rd">列表</a></p>

halida 198 9

重返OurCoders

<p>从2014年以来好久没逛过这个谈论了,不知道这个谈论的运营现在怎么样,开发人员是不是原来的人,前端UI做得不太好</p>

梁建溢 5 36