三星 OCP 内存存储技术深度解码:CXL 的价值不在带宽而在解耦,把内存从服务器附属品变成数据中心公共资源;三星真正的意图不是赢 HBM 比赛,而是换一个比赛项目
量子道
量子道 · 扫码阅读
微信 · 浏览器扫码
在手机上获得更好的阅读体验
核心结论:10 月 12 日,三星电子在 OCP 全球峰会上由存储器业务先进工程团队执行副总裁 Shim Ho-joon 发布新一代 AI 内存与存储战略,与 AMD 联合演示基于 CMM-D 的 CXL 内存池化方案,并展出 HBM4E/HBM5、定制 HBM、zHBM、LPDDR5X-PIM、QLC NAND 与 FDP 存储、KV 缓存优化与 Direct Storage,同时展示 2nm GAA 晶圆与由三星 4nm 量产的 Groq LPU 晶圆。市场容易把它读成”又一代 HBM 升级”,但这场发布里最重要的一句话其实是三星自己给出的判断:随着模型变大、推理时数据量与 KV 缓存容量激增,内存容量扩展与数据存储技术”已变得比内存带宽更关键”。 由 HBM 的主要供应商之一亲口说出这句话,本身就是一次叙事转向的确认。由此展开本文三条核心判断。第一,带宽与容量是两个正交的维度——带宽解决”搬得快不快”,容量解决”放不放得下”。而过去五年,存储行业的全部叙事都在带宽上,这就是错配的根源:如果问题是容量,更快的带宽帮不上忙。 第二,CXL 的真正价值不是”带宽慢一点的内存”,而是解耦——它把内存容量从”服务器”这个物理边界里解放出来,把内存从服务器的附属品变成数据中心的公共资源。 它的经济学含义是把扩容单位从”整机”降为”模组”,从而改写扩容的边际成本曲线——这才是首 token 延迟下降、吞吐大幅提升背后的真实机制:不是因为内存变快了,而是因为内存终于可以按需分配,而不是按机分配。 第三,三星真正的战略意图不是赢 HBM 比赛,而是换一个比赛项目。 在一个维度上落后一个身位时,最有效的策略往往不是同维度加速,而是增加竞争的维度——一旦竞争从”单芯片带宽”扩展到”系统级存储架构”,落后一个身位的权重会被稀释。 而它把战略公开表述为三条轴(速度、可扩展性、持久性),这件事本身就是战略动作。
一、三星自己给出的框架:三条轴里,藏着一次叙事转向
先看三星主动划出的战略框架——速度(Speed)、可扩展性(Scalability)、持久性(Persistence):
| 战略轴 | 对应技术 | 解决的问题 |
|---|---|---|
| 速度 | HBM4E/HBM5、定制 HBM、zHBM(内存堆叠于计算芯片之上)、PIM | 计算单元本地的最热数据供给 |
| 可扩展性 | CXL + CMM-D(CXL Memory Module-DRAM)内存池化 | 容量受限与内存资源孤岛 |
| 持久性 | 下一代企业级 SSD、QLC NAND、FDP、KV 缓存优化、Direct Storage | 大容量数据的存储与管理效率 |
三条轴里只有第一条是 HBM 的传统战场,另外两条都是新维度。把战略从一个指标写成三个指标,这件事本身就是战略动作——后面会展开。
但比框架更重要的,是三星给出的判断依据。它明确指出:AI 模型规模持续放大、推理过程中需要处理的数据量与 KV 缓存(key-value cache)容量激增,因此内存容量扩展和数据存储技术已经变得比内存带宽更关键。
这句话需要放在五年来的行业语境里才能看出分量:过去五年,“存储”这个行业的全部叙事都是带宽——HBM 的每一代发布都是带宽数字的竞赛,所有宣传口径都在比谁跑得更快。 现在,由 HBM 的主要供应商之一亲口说出”容量比带宽更关键”,这是一次叙事转向的正式确认。
为什么会转向?回到推理的成本结构:
在 Transformer 推理中,KV 缓存必须在整个会话期间常驻在快速内存里——把它换出到慢速存储,延迟就无法接受。而它的大小随上下文长度 × 并发数增长。
于是出现了一个结构性的新事实:
推理的成本结构里,出现了一个”必须常驻、且随用户数和对话长度持续膨胀”的内存块。这是容量问题,而不是带宽问题——而容量问题,无法靠更快的芯片解决。
这也解释了那个在很多集群里出现的反常现象:GPU 算力闲置,但内存不够用。 卡算得很快,却存不下中间状态。集群的效率上限不再由峰值算力决定,而由能装下多少常驻状态决定。
写到这里,本文的第一条判断可以定下来了:
带宽和容量是两个正交的维度。 带宽解决”搬得快不快”,容量解决”放不放得下”。过去五年的全部资源配置都押在带宽上——而当真正的约束已经换成容量时,更快的带宽无法解决问题。 这是本文认为最需要纠正、也最容易被忽略的一个认知,因为它过去几年一直是行业共识的基础。
二、CXL 的真正价值不是带宽,是解耦
市场对 CXL 最常见的理解是”比 HBM 慢一点的内存”。这个理解抓住了带宽差距这个事实,却错过了它真正在做的事。
CXL 的本质,是把内存容量从”服务器”这个物理边界里解放出来。
先看过去的硬绑定有多硬。在传统架构下,想要更多内存,路径只有一条:买整台服务器——包括 CPU、主板、机箱、电源、网卡,因为内存插槽长在主板上。于是:
- 内存容量与整机绑定,扩容的最小单位是”一台服务器”;
- 每台服务器的内存只能自己用,空闲时也无法借给别人,形成”内存孤岛”;
- 而 AI 推理的内存需求是波动的——高峰期不够、低谷期闲置,孤岛化的资源无法相互调节;
- 结果就是”整机叠加”:为了给少数高并发业务补内存,不断加服务器,同时把大量算力一起买了进来却用不上。
CMM-D 的池化改变了这件事:多台服务器的 DRAM 通过 CXL 组成共享内存池,哪个业务需要大容量 KV 缓存,就动态分配给它。
所以本文认为,对 CXL 最准确的一句话定义是:
它把内存从”服务器的附属品”变成了”数据中心的公共资源”——相当于把内存从私有制改成了公有制。
而它真正的经济学含义,比带宽数字重要得多:
它把内存的扩容单位,从”整机”降为”模组”。 过去要 1TB 内存必须买一台服务器;现在只需要加一个内存模组。这直接改写了扩容的边际成本曲线。
这也就解释了三星演示数据里那些看起来”不像内存升级”的结果——据其公布的演示数据,首 token 延迟(TTFT)下降约 38%、系统有效吞吐最高提升 3.3 倍。这些收益并不主要来自”内存变快了”,而是来自”内存终于可以按需分配,而不是按机分配”。 前者是性能改进,后者是资源配置方式的改进——而后者的空间通常远大于前者。
当然边界必须说清楚:CXL 的带宽与 HBM 存在数量级差距,训练场景仍然高度依赖 HBM,二者是分层互补而非替代。 但正因为如此,对 CXL 的准确定位应该是:
它不是”更快的内存”,而是”更大、更灵活、更便宜的内存”。 用它去比带宽是比错了维度——它的竞争对手从来不是 HBM,而是”再买一台服务器”这个选项。
三、三级分层的本质:一张按”数据搬运距离”定价的价目表
三星的整套产品矩阵,合起来是一张清晰的三级结构:
| 层级 | 位置 | 特性 | 承载的数据 |
|---|---|---|---|
| 顶层:HBM4E/HBM5、定制 HBM、zHBM | 计算芯片本地或之上 | 带宽最高、单位容量最贵、容量最小 | 最热的实时计算数据 |
| 中层:CXL CMM-D 池化 DRAM | 机架与集群级 | 带宽中等、可共享、可弹性伸缩 | KV 缓存、温数据 |
| 底层:AI 优化企业级 SSD(QLC NAND、FDP) | 存储层 | 带宽最低、单位容量成本最低、容量最大 | 冷数据、向量库、历史缓存 |
要理解这套架构的第一性原理,需要换一个视角:不要把它看成三种产品,而要看成一件事——把数据放在”它值得待的位置”上。
而”值得”的判据是一个成本比较:
分层存储的本质,是用容量成本去套利带宽成本。 只要相邻两层之间的单位成本差,大于数据在两层之间迁移的开销,分层就有净收益。这是整个架构的第一性原理——它不依赖任何特定技术,只依赖价差存在。
这条原理还解释了两个看似矛盾的动作为什么可以同时进行:
- zHBM 把内存直接堆叠到计算芯片之上——这是把”距离”压到接近零的极致做法;
- QLC NAND 与 FDP 把最底层做得更大更便宜——这是把”远方”做得更经济。
产业在同时做两件事:把最近的一层做到最近,把最远的一层做得更便宜。 而只有两端都被推到极致,中间层(CXL 池化 DRAM)才会获得明确的存在空间——中间层的价值,来自两端价差的扩大。
这也带来一个必须承认的代价:三层结构会显著提高运维复杂度。 冷热数据如何分级、何时迁移、迁移的触发条件是什么、故障如何隔离——这些都是新问题。分层越细,调度的复杂度越高,这是这套架构的固有成本,不会因为硬件进步而自动消失。
四、三星的战略真相:不是赢 HBM 比赛,是换一个比赛项目
现在说三星这套动作背后的真实意图。
先看格局。三星的基本盘依然强大:据 Counterpoint Research 与 TrendForce 数据,今年二季度三星在全球 DRAM 市场以 39% 份额居首、NAND 以 29.3% 居首;产能上,今年三星 DRAM 产量预计约 817.5 万片(300mm 折算),超过 SK 海力士的 666 万片和美光的 360 万片。
但在 HBM 这个利润最高的细分上,三星长期落后于 SK 海力士(市场机构估算其份额过半,三星在两成上下)。这是一个尴尬的位置:总量第一,但增长最快、利润最厚的那一块不是自己的。
面对这种局面,通常有两条路:在同维度加速追赶,或者增加竞争的维度。 三星选择的是后者——而且选择得很明确。
当你在一个维度上落后一个身位时,追赶的代价极高(良率、客户认证、时间)。而最有效的策略往往不是加速追赶,而是改变比赛项目。 一旦竞争维度从”单芯片带宽”扩展到”系统级存储架构”,落后那一个身位的权重就会被稀释。
这就是本文对三星整套动作的核心判断:它不是来赢 HBM 比赛的,它是来换一个比赛项目的。
而”增加维度”必须有人跟,所以生态布局是这套战略的必要条件,不是附加项。三星的做法是双线:
一是深度绑定 AMD。 双方早在今年 3 月签署谅解备忘录,AMD 首席执行官苏姿丰 10 月 7 日访问韩国进一步讨论内存与代工合作,本次 OCP 又联合完成了 CXL 方案演示。联合演示的意义在于:CXL 池化需要 CPU/加速器一侧的配合,单靠内存厂无法独立完成。
二是兼容多家加速器生态。 展区同时出现 Groq LPU 晶圆、NVIDIA Groq 3 LPX 系统(芯片由三星 4nm 量产)、2nm GAA 晶圆以及 HBM5 与定制 HBM 概念模型。
这里有一个原稿未充分展开、但极其关键的筹码:三星同时是这些 AI 芯片的代工方。
“存储 + 代工”的双重身份,是三星推动架构定义权的独特武器。 一家只卖内存的公司,只能劝说客户采用新架构;而一家既卖内存、又帮客户造芯片的公司,可以在芯片设计的早期阶段就把存储架构的选择嵌进去。这才是它敢”换比赛项目”的底气所在。
同时也要看到这个策略的必然要求:定义架构的人,必须让足够多的参与者受益,否则架构会被无视。 所以”不把鸡蛋放在一个篮子里”在这里不是分散风险,而是架构推广的必要条件——采用的是”多点位、多生态、以量换标准”的路径。
五、定制化 HBM 的深层含义:从标准品到定制品,是价值链位置的迁移
在”速度”这条轴里,最值得单独说的是定制 HBM,它的战略含义经常被低估。
HBM 过去是 JEDEC 标准下的通用产品——标准品的竞争方式是拼成本、拼良率、拼产能。而在这三项上,三星凭借产能规模其实是有优势的。
定制 HBM 改变了竞争的性质:存储原厂需要深度参与客户芯片的架构设计,按客户的芯片特征来定制堆叠方式、带宽与功耗。
从卖标准品到卖定制品,是价值链位置的跃升。 标准品只能拼价格——因为客户可以换供应商;定制品有转换成本、有议价权、有锁定效应——而且能分享客户成功的收益。 这是从”供应商”变成”合伙人”的分界线。
这也让 MAX Lab(Memory Application eXperience Lab) 的意义变得清楚:它让客户在真实 AI 负载下评估 PIM、CMM-D、下一代 SSD 等新技术,并把系统需求在开发早期纳入产品定义。
它不是售后实验室,它是定制生意的入口。 客户在这里得到的是”敢用未验证新品类”的信心——而降低采纳门槛,正是新品类商业化的第一道坎;三星在这里得到的是客户真实负载的一手数据——而理解客户负载,正是做定制的前提。
这是一个双向的数据交换机制:客户换来验证与信心,三星换来需求与定义权。理解了这一层,就能理解为什么三星把实验室建设当作战略投入而非市场费用。
六、CXL 的真实门槛不在芯片,在软件栈——以及它会从哪里开始落地
必须把这条约束说透,否则前面的乐观会失真。
CXL 的硬件(控制器、模组)可以较快做出来。但让它真正可用的,是操作系统对内存分层的支持、虚拟化层的适配、集群调度器、驱动、监控、故障处理与内存语义一致性——这是一整套软件栈。
CXL 的门槛不在”能不能做出来”,而在”做出来有没有人用”。 这与 GPU 生态完全同构:CUDA 的护城河从来不是芯片,而是十几年的软件积累。
而软件生态天然面对一个鸡生蛋难题:没有足够多的部署,软件厂商不会投入适配;没有软件适配,用户不会部署。
那么破局点在哪里?本文的判断是:
CXL 不会从”替换主内存”开始落地,而会从”承载 KV 缓存”这个旁路场景开始。
理由是 KV 缓存恰好满足了一个新品类落地最需要的三个条件:
| 条件 | KV 缓存为何满足 |
|---|---|
| 最小软件改动 | 它是推理服务新增的独立负载,不侵入存量应用的并发模型,无需推翻现有架构 |
| 生命周期清晰 | 会话结束即可释放,天然适合池化与动态回收——最难的资源回收问题在这里最轻 |
| 收益可量化 | 直接体现在首 token 延迟与吞吐上,投入产出比一目了然 |
这解释了三星为什么把 KV 缓存而不是通用内存扩容作为主打场景——它选的是最容易落地的那扇门。 这不是技术能力的取舍,而是商业化路径的取舍:一个新技术品类,应该先用最小的改动证明最大的收益,再去争取更大的地盘。
时间预期上需要保持耐心:硬件演示不等于数据中心规模化部署。 从适配到试点再到规模采购,合理的窗口大致落在 2027–2028 年。
七、对国内产业的启示:短板要说清,但有一条被低估的公平赛道
先如实说短板。一,HBM 高端堆叠工艺与良率仍有明显差距——这一层的追赶需要时间与重资产投入。二,CXL 软件栈是国内最大的短板,内存池化调度、冷热数据分层管理、操作系统适配,这些都不是芯片问题。三,PIM 与 AI 优化 SSD 尚处早期研发阶段。
但有三条判断可以正面地说:
第一,CXL 是开放的行业标准,不是任何一家公司的私有协议。
这一点极其重要。它意味着不存在”生态门票被一家垄断”的问题——这与 CUDA 那种由单一公司长期积累形成的封闭生态,是两种完全不同的竞争结构。国内已有 CXL 控制芯片与模组研发,澜起等企业的 CXL 芯片进入海外存储原厂导入流程,服务器厂商也在开展原型验证。在一条开放标准的赛道上,起步晚不构成结构性劣势。
第二,标准品的追赶靠重资产与时间,而软件栈与系统集成的追赶,靠工程师密度与场景密度。
这两件事的性质完全不同:前者的斜率由资本和产业积累决定,后者由人才规模和应用场景决定。在”系统适配与集成”这一层,追赶的斜率可以更陡——而国内在这两项上有结构性优势。
第三,也是最重要的一条:国内恰好拥有内存池化收益最大的场景。
超大规模推理服务——用户数多、并发高、上下文长——正是 CXL 池化收益最显著的场景。 三星演示中的 38% 与 3.3 倍是在特定配置下取得的结果;当并发规模进一步放大、内存孤岛问题更严重时,池化的收益会更明显。 这意味着:
场景优势可以转化为架构话语权。 谁拥有最真实、最大规模的应用场景,谁就最有可能发现这套架构里哪些设计是对的、哪些是错的——而架构定义权,往往属于最先在大规模场景里踩过坑的那一方。
所以对国内产业最实际的启示是:不必试图在每一个层级都追平,而应选择”场景密度最高”的那一层重点突破。 AI 存力是完整的软硬件体系,只突破硬件芯片远远不够——但反过来说,软件栈这一层恰恰是可以”用工程师数量换时间”的层,这是最现实的突破方向。
八、趋势推演:一场从”整机”到”资源池”的解耦革命
把这次发布放进更长的周期看,它属于一场更大的变化。这条路径可以分五层来推:
一、评价体系迁移。 从算力(FLOPS)→ 存力(容量、带宽、池化效率)→ 最终会落到**“数据搬运效率”**。因为真正决定成本和能效的,从来不是计算本身,而是数据移动的距离与次数。算力是显性指标,存力是隐性瓶颈。
二、采购单位迁移。 从”整机”→“资源池”。内存先被池化,算力随后,存储最后。 采购单位的每一次下移,都会改变整个产业链的价值分配方式。
三、架构形态迁移。 从”以服务器为中心”→“以资源池为中心”。这就是业界所说的分解式架构——把计算、内存、存储拆成可独立扩展、独立采购、独立回收的资源单元。
四、竞争焦点迁移。 从”芯片规格”→“系统架构定义权”。规格可以追平,定义权一旦确立就很难夺回——因为它背后是配套的软件、接口与生态。
五、存储原厂角色迁移。 从”零部件供应商”→“架构合伙人”。三星用 MAX Lab、定制 HBM、联合演示做的,正是这个身份切换。
顺着这五条推下去,会得到一个更大的判断:
内存池化只是第一步。既然内存可以池化,算力为什么不可以?存储为什么不可以? 这条路径的终点,是整个数据中心变成一台”资源可动态组合的计算机”。而这场革命的终局,是数据中心的操作系统之争——谁能定义资源如何被发现、分配、回收与计费,谁就掌握了下一代基础设施的入口。
这也是为什么本文认为,三星这场发布会真正的分量不在任何一颗芯片上:它在争夺的不是一块市场,而是下一代基础设施的分层方式。
九、四个需要校正的认知
一、CXL 出现不会替代 HBM。 二者是正交维度:HBM 负责芯片本地的最热计算,CXL 负责推理场景的弹性扩容与 KV 缓存,属于分层互补。用带宽去衡量 CXL 的价值,是拿错了尺子。
二、现场演示不等于大规模商用。 硬件跑通只是第一关,真正的关卡在操作系统、虚拟化、调度器的适配。2026 年更多是原型验证,规模上量窗口大致在 2027–2028 年。
三、三星这套技术不代表 AI 算力硬件竞争结束。 它解决的是内存—存储侧的瓶颈。AI 芯片本身、互联带宽、Scale-up/Scale-out 网络同样是集群的关键约束——这是一场全栈体系博弈,任何单一环节的突破都不足以决定胜负。
四、也是最需要纠正的一条:内存墙不是”用更快的内存”就能解决的问题。
这条误区最危险,因为它过去几年一直是行业资源配置的隐含前提。当真正的约束是容量时,更快的带宽帮不上忙——KV 缓存不会因为 HBM 更快而变小。认错问题的性质,比努力解决问题更重要。
十、六个可以跟踪的落地指标
- CXL 软件栈的实际适配进度——操作系统内存分层支持、虚拟化适配、集群调度器改造。看软件,不看硬件 demo。
- 云厂商智算中心招标中是否出现”内存池化”独立标段。 招标口径的变化,比任何技术发布都更能说明落地程度。
- 三星 HBM 份额变化与 HBM5、定制 HBM 的客户认证进展。 这决定”换比赛项目”能否反向带动它在”速度”这条轴的份额。
- MAX Lab 的客户名单与联合验证项目数量。 这是生态绑定最诚实的量化证据——实验室里有多少真实客户,比展台上有多少概念模型重要得多。
- 国内 CXL 芯片的导入进度与 KV 缓存池化的场景落地。 重点看是否从原型验证走到生产环境试点。
- 一个反直觉但最可靠的指标:推理服务的定价方式是否改变。 如果内存开始成为独立的计费维度(例如按”内存容量·小时”计费),说明池化真的落地了。因为计费维度必须与资源边界一致——只有当内存真正成为可被独立分配的资源,它才可能被独立计费。定价方式的变化,是架构变化最可靠的证据。
十一、结论:问题的性质变了,答案的方向才会跟着变
回到这场发布。
它表面上是一批新内存与存储产品,实质上有三层含义:技术上,它确认了 AI 基础设施的瓶颈已经从”带宽”扩展到”带宽 + 容量”;架构上,它用 CXL 把内存从服务器里解耦出来,把扩容单位从整机降为模组;战略上,它把竞争从单一芯片规格扩展到系统架构定义权。
而本文认为最值得记住的一条启示,与技术和公司都无关:
问题的性质变了,答案的方向才会跟着变。 当行业把”搬得更快”当作唯一命题时,所有资源都会流向带宽;只有当行业承认”放不下”才是真约束,容量、池化、分层调度才会被认真对待。三星这次最有价值的动作,不是发布了什么产品,而是公开说出了那句”容量比带宽更关键”。
对国内产业而言,这既是提醒也是机会。提醒在于:存力是完整的软硬件体系,只补硬件会留下结构性缺口。 机会在于:CXL 是开放标准,不存在门票垄断;而软件栈与系统集成这一层,恰好可以用工程师密度和全世界最丰富的应用场景去追赶。
一句话概括这场变化的性质:
AI 算力的竞争,正在从”谁的芯片更强”转向”谁的系统组织得更合理”。 前者比的是单点极限,后者比的是整体效率。当产业从比极限转向比效率时,胜负的判据就从”你能做到多快”,变成了”你能让多少资源同时被用起来”。
这也许才是”存力时代”真正要考的那道题。
本文基于三星电子 2026 年 10 月 12 日在 OCP 全球峰会上的公开发布内容及 TrendForce、Yonhap Infomax、The Korea Times、ZDNet 等媒体公开报道整理。文中三星与 AMD 联合演示的性能数据(首 token 延迟下降约 38%、系统有效吞吐最高提升 3.3 倍)为厂商公布的演示口径,实际效果随配置与负载不同而变化;HBM 细分市场份额为市场研究机构估算值。关于解耦本质、扩容单位下移、分层定价第一性原理、“换比赛项目”战略、KV 缓存作为落地切入点等分析判断为作者观点,不构成任何投资建议。