Cost, Billing, and Ops2026年10月13日Flatkey Team

NVIDIA Vera Rubin GPU:GPU、NVL72、内存、网络与可用性追踪

一份关于 NVIDIA Vera Rubin GPU 规格、DGX Vera Rubin NVL72、HBM4 内存、网络以及面向云 GPU 买家的可用性里程碑的最新追踪。

NVIDIA Vera Rubin GPU:GPU、NVL72、内存、网络与可用性追踪

NVIDIA Vera Rubin GPU:GPU、NVL72、内存、网络与可用性追踪

NVIDIA Vera Rubin GPU 不只是一个可以插入熟悉服务器中的单一加速器。NVIDIA 正将 Vera Rubin 定位为面向 agentic 工作负载的机架级和 POD 级 AI 工厂平台:更多 GPU 内存、更快的内存带宽、更紧密的 scale-up 互连,以及专为超大规模训练和推理集群设计的网络栈。

对于云 GPU 买家来说,这改变了问题本身。问题不再只是“ NVIDIA Vera Rubin GPU 的规格是什么?” 还包括:Vera Rubin 系统何时可用,NVL72 是什么意思,机架级可暴露多少 HBM4 内存,需要什么网络,以及在等待容量时何时改用模型 API 更合理?

本追踪器汇总了截至 2026 年 10 月 13 日 NVIDIA 已公开披露的信息,并将已确认规格与采购假设区分开来。

快速答案:什么是 NVIDIA Vera Rubin GPU?

NVIDIA Vera Rubin GPU 是 NVIDIA Vera Rubin 平台中的 GPU 代际,该平台是继 Grace Blackwell 之后面向大规模 AI 工厂的继任平台。在 NVIDIA 的 DGX Vera Rubin NVL72 系统中,该机架将 72 个 NVIDIA Rubin GPU 与 36 个 NVIDIA Vera CPU、20.7 TB 的 HBM4 GPU 内存以及 1,400 TB/s 的 GPU 内存总带宽结合在一起。NVIDIA 将这些 DGX Vera Rubin NVL72 规格标注为初步规格,且可能发生变化,因此采购模型应保留追踪的修订日期。

NVIDIA 还于 2026 年 5 月 31 日宣布,Vera Rubin 平台已进入全面量产爬坡阶段,生产发货将于 2026 年秋季开始。这对买家很重要,因为首批产品很可能先以集成系统和云容量的形式出现,而不是简单地作为“选择某个 GPU SKU”的决策。

NVIDIA Vera Rubin GPU 追踪器

字段 当前公开状态 重要性
GPU 代际 Vera Rubin 系统中的 Rubin GPU 面向 Blackwell 之后 AI 工厂部署的继任平台。
机架形态 DGX Vera Rubin NVL72 应视为机架级基础设施,而不是普通的 PCIe GPU 节点。
每个 NVL72 的 GPU 数量 72 个 Rubin GPU 定义了单机架系统的 scale-up 域。
CPU 配对 36 个 Vera CPU CPU/GPU 平衡是平台设计的一部分。
GPU 内存 每个 DGX Vera Rubin NVL72 配备 20.7 TB HBM4 这是长上下文推理、大规模 MoE 模型和训练检查点的关键约束。
内存带宽 1,400 TB/s GPU 内存总带宽 对于推理工作负载而言,内存带宽通常比原始 FLOPS 更先成为瓶颈。
所述密集性能 3,600 PFLOPS NVFP4 推理;2,520 PFLOPS NVFP4 训练;1,260 PFLOPS FP8/FP6 训练 可用于平台对比,但基准验收应使用特定工作负载的 tokens/sec 和单位可接受输出成本。
Scale-up 互连 DGX Vera Rubin NVL72 规格中包含 9 个 L1 NVIDIA NVLink 交换机 决定 GPU 作为单一大型计算域协同工作的紧密程度。
Scale-out 网络 超过 144 个单端口 ConnectX-9 VPI 适配器,支持 800 Gb/s InfiniBand/Ethernet,另有 18 个双端口 BlueField-4 VPI 适配器,支持 400 Gb/s 容量规划人员需要考虑网络、布线、电力、安全和租户假设,而不仅仅是 GPU 数量。
生产状态 正在爬坡进入全面量产;根据 NVIDIA 2026 年 5 月 31 日的公告,发货将于 2026 年秋季开始 应将早期可用性视为受供应链和云区域影响。

NVIDIA Vera Rubin GPU 架构:有哪些变化

NVIDIA Vera Rubin GPU 架构最重要的变化是分析的有效单位上移了。对于 H100 或 A100,许多团队会比较单个 GPU 实例。到了 GB200,如今又到了 Vera Rubin,买家越来越多地比较完整机架系统、POD、网络互连和设施约束。

这一变化在 DGX Vera Rubin NVL72 中表现得很明显。单个机架级系统暴露 72 个 Rubin GPU 和 36 个 Vera CPU。该平台面向那些需要在众多加速器之间进行高速通信的模型:长上下文推理、多步 agent 推理、后训练、强化学习、合成数据循环以及前沿模型训练。

对于 AI 基础设施团队来说,这意味着 NVIDIA Vera Rubin GPU 应从五个层面进行评估:

  1. GPU 计算:按精度划分的 FLOPS、内核支持以及框架成熟度。
  2. HBM4 内存:每个模型副本可用内存、内存带宽以及 KV cache 容量。
  3. NVLink 域:机架中有多大部分表现得像一个紧密耦合的加速器池。
  4. Scale-out 互连:机架如何通过 InfiniBand、Ethernet、Spectrum-X 或云提供商互连进行通信。
  5. 运维层:编排、遥测、散热、故障域、租户隔离以及软件支持。

如果你的工作负载只需要托管模型调用,那么这套堆栈可能比你愿意自建的基础设施还要重。如果你的工作负载需要定制模型训练、专有权重、底层调度器控制或面向全机群的推理经济性,那么 Vera Rubin 就会成为一个值得重点关注的项目。

NVIDIA Vera Rubin GPU 规格:已确认内容

NVIDIA 的 DGX Vera Rubin NVL72 页面目前列出了以下初步规格:

规格 DGX Vera Rubin NVL72 公开数值
GPU 和 CPU 72 个 NVIDIA Rubin GPU 和 36 个 NVIDIA Vera CPU
GPU 总内存 20.7 TB HBM4
GPU 聚合内存带宽 1,400 TB/s
NVFP4 推理 3,600 PFLOPS
NVFP4 训练 2,520 PFLOPS
FP8/FP6 训练 1,260 PFLOPS
NVLink 交换系统 9 个 L1 NVIDIA NVLink 交换机
前端 / 横向扩展适配器 144+ 个 ConnectX-9 VPI 单端口适配器,速率为 800 Gb/s InfiniBand/Ethernet
DPU / 基础设施适配器 18 个双端口 BlueField-4 VPI 适配器,速率为 400 Gb/s InfiniBand/Ethernet
软件 NVIDIA Mission Control、NVIDIA AI Enterprise、NVIDIA DGX OS
支持 三年企业级标准支持

“初步信息”这一说明很重要。它并不意味着 NVIDIA Vera Rubin GPU 规格表不可用;它意味着在签署算力容量合约之前,每个预算模型都应包含“最后验证时间”字段和刷新流程。

为什么 HBM4 是值得关注的规格

次要关键词“nvidia vera rubin gpu hbm4”很重要,因为 HBM4 改变了推理和训练工作负载的实际上限。大模型很少因为理论 FLOPS 数值太低而失败。它们失败往往是因为部署无法让足够多的参数、激活值、KV cache 和路由状态靠近计算单元。

对于推理,HBM4 会影响:

  • 长上下文:在发生溢出或缩小批量大小之前,KV cache 可容纳的空间更多。
  • Agentic 工作负载:每个模型副本可同时处理更多推理步骤和工具调用状态。
  • MoE 路由:为活跃专家和受内存限制的路由路径提供更好的余量。
  • 批处理经济性:更高的 tokens/sec 只有在可接受的输出质量和延迟仍然满足 SLA 时才有意义。

对于训练和后训练,HBM4 会影响检查点大小、激活策略、优化器状态放置,以及当任务跨机架运行时通信开销的表现。因此,Vera Rubin 采购简报应当在原始 GPU 定价之外,同时要求提供内存带宽和互连方面的证据。

NVL72 对机架买家的意义

“nvidia vera rubin gpu rack” 这个查询通常来自试图将芯片发布映射到真实基础设施的买家。在 NVIDIA 的命名体系中,NVL72 是一种机架级系统,通过 NVLink 交换系统连接 72 个 GPU。正是这种 scale-up 互连,使该平台对于 AI 工厂规划比对于小型、单节点 GPU 采购更相关。

对于云 GPU 或托管团队而言,NVL72 会改变运维检查清单:

规划领域 需要询问的问题
供电与散热 机房是否能支持机架密度、液冷假设和服务模式?
网络拓扑 提供商提供的是所宣传的 InfiniBand/Ethernet fabric,还是仅提供隔离的 GPU 实例?
故障域 当一个托盘、交换机、适配器或机架在多日任务中故障时会发生什么?
调度 调度器能否保留完整的 NVL72 拓扑,还是会将 GPU 位置打散?
存储 存储路径能否为该机架供给数据而不成为瓶颈?
租户隔离 BlueField、网络策略、加密和多租户边界如何配置?
验收测试 在投入生产之前,哪些针对工作负载的 tokens/sec、step time、checkpoint 和恢复测试必须通过?

这就是为什么 Vera Rubin 应该出现在你的 GPU 集群 TCO 工作表旁边,而不只是出现在你的 GPU 规格对比表中。

可用性追踪:公开已知信息

NVIDIA 于 2026 年 5 月 31 日发布的新闻稿称,Vera Rubin 正在加速进入全面量产阶段,并且计划从 2026 年秋季开始发运量产产品。该新闻稿还列出了与此次量产相关的服务器制造商、存储合作伙伴、云服务提供商以及生态系统参与者。

这并不意味着每位买家都能在第一天租到 NVIDIA Vera Rubin GPU 实例。“全面量产”与“在你所需的区域、拓扑、配额、预留期限和软件栈中可用”是不同的里程碑。

与提供商沟通时,请使用此可用性追踪器:

里程碑 需要确认的内容
芯片 / 系统生产 提供商是正在接收 Vera Rubin 系统,还是只是在宣布未来支持?
机架拓扑 容量是按完整 NVL72、部分机架、单租户集群,还是共享 GPU 实例出售?
区域 哪些云区域或托管站点拥有实物库存?
网络模式 InfiniBand、Ethernet、Spectrum-X,还是提供商特定的 fabric?
软件栈 CUDA、驱动、Kubernetes、Slurm、vLLM、SGLang、NCCL、可观测性,以及受支持的镜像。
预留模式 按需、承诺容量、私有集群、托管服务,还是仅用于基准测试的预览?
验收窗口 在长期承诺之前,您能否运行一个贴近生产的基准测试?

如果您的团队仍在决定是否等待,可将 Vera Rubin 的可用性与 GPU 云与模型 API 基线进行比较。对于当前就需要输出质量和正常运行时间的产品,托管模型 API 路径可能更快;而对于需要对专有训练或推理基础设施进行直接控制的团队,Vera Rubin 更具吸引力。

Vera Rubin 与 Blackwell:实际差异

大多数团队不应将 Vera Rubin 定位为“更新一代的 Blackwell”。实际差异在于平台目标。

GB200 和 GB300 等 Blackwell 系统推动了机架级推理和训练在推理型工作负载上的发展。Vera Rubin 继续沿着这一机架级方向前进,包含 Rubin GPU、Rubin CPU、HBM4,以及围绕 agentic AI 工厂的更大平台叙事。NVIDIA 表示,与上一代 Grace Blackwell 平台相比,Vera Rubin 在规模化场景下可提供 10 倍的 agent 吞吐量,但买家仍应结合自己的模型、上下文长度、路由模式和工具调用特征进行验证。

如果您正在比较当前的采购选项,请将 Vera Rubin 与 GB200 与 B200 一并阅读。真正有用的问题不是“哪颗芯片更新?”而是“哪种拓扑在我的工作负载窗口内可用、可基准测试,并且在财务上站得住脚?”

何时等待 NVIDIA Vera Rubin GPU 容量

在以下情况下,等待 NVIDIA Vera Rubin GPU 容量是有意义的:

  • 您训练或后训练大型专有模型,并且需要完整的硬件控制。
  • 您的推理工作负载受内存限制,而 HBM4 容量会改变批量、延迟或上下文长度上限。
  • 您可以预留机架级拓扑,而不是零散的 GPU 实例。
  • 您已有设施、调度器、存储、网络和可靠性团队来运营该栈。
  • 您的采购窗口与 2026 年秋季及更晚的容量爬坡相匹配。

在以下情况下,等待的风险更高:

  • 您需要立即获得生产容量。
  • 您的工作负载可以通过 API 使用托管的前沿模型或开源模型。
  • 您无法控制足够的利用率来摊薄机架级基础设施成本。
  • 您的主要瓶颈是应用路由、评估、可靠性或成本归因,而不是原始 GPU 访问。
  • 在承诺之前,您无法运行验收基准测试。

对于许多产品团队来说,最务实的路径是混合方案:现在先用模型 API 处理面向用户的生产工作负载,在可用的 GPU 云上运行基准测试,并且仅在基准测试证明每个已接受输出的成本更低时再预留 Vera Rubin。

Vera Rubin 容量采购清单

在购买或预留 Vera Rubin 容量之前,请向提供商询问:

  1. 确切的系统拓扑:NVL72、POD、部分机架,还是实例抽象。
  2. 可供工作负载使用的 GPU 内存,而不仅仅是每个机架的名义 HBM4 容量。
  3. 网络 fabric 细节:InfiniBand、Ethernet、Spectrum-X、超额订阅以及跨机架策略。
  4. 驱动、CUDA、NCCL、调度器和容器镜像版本。
  5. 存储吞吐量、检查点恢复时间以及故障恢复流程。
  6. 使用您自己的模型、提示词组合、上下文长度和验收标准进行的基准测试窗口。
  7. 定价依据:按小时、预留、承诺、私有集群、托管平台,还是企业合同。
  8. 如果公开规格、交付日期或基准测试结果发生变化时的退出条款。
  9. 可观测性:按作业划分的 GPU 利用率、内存带宽、网络计数器、排队时间和成本分摊。
  10. 安全控制:租户隔离、加密、机密计算声明和审计材料。

将这份清单与您的 GPU 租赁价格 模型和 GPU 集群租赁指南 配合起来,这样决策就能包含排队时间、利用率、出站流量、人员时间以及失败运行成本。

Flatkey 观点:当您需要硬件控制时,就使用硬件

NVIDIA Vera Rubin GPU 很重要,因为它为构建或租用严肃 AI 工厂基础设施的团队提高了能力上限。但它并不一定是每个 AI 产品团队最快的路径。

如果您需要直接的硬件控制、自定义训练、低层级调度或专用机架拓扑,请密切跟踪 Vera Rubin,并坚持要求贴近生产的基准测试。如果您的产品需要可靠访问模型输出、成本可视性和提供商灵活性,那么托管模型 / API 层可以在硬件供应成熟期间继续推动路线图前进。

Flatkey 就是为第二条路径而构建的:一个密钥、一个余额,以及在官方模型和工具 API 之间路由。请将其作为你 Vera Rubin 分析中的托管模型基线,这样你比较的是机架级 GPU 拥有成本与一个可运行的生产替代方案,而不是与一张空白电子表格作比较。

常见问题

什么是 NVIDIA Vera Rubin GPU?

NVIDIA Vera Rubin GPU 是 NVIDIA Vera Rubin AI 工厂平台中的 Rubin 代 GPU。 在 DGX Vera Rubin NVL72 中,NVIDIA 将 72 颗 Rubin GPU 与 36 颗 Vera CPU、HBM4 内存、NVLink 交换、高速网络以及企业级 DGX 软件结合在一起。

NVIDIA Vera Rubin GPU 的规格是什么?

公开的 DGX Vera Rubin NVL72 初步规格包括 72 颗 Rubin GPU、36 颗 Vera CPU、20.7 TB HBM4、1,400 TB/s 的 GPU 内存总带宽、3,600 PFLOPS NVFP4 推理性能,以及 9 个 L1 NVLink 交换器。NVIDIA 标注这些数值为初步规格,且可能发生变化。

NVIDIA Vera Rubin GPU 系统什么时候可用?

NVIDIA 于 2026 年 5 月 31 日宣布,Vera Rubin 正在加速进入全面量产,且计划从 2026 年秋季开始发货。实际可用性仍将取决于供应商库存、地区、拓扑结构和合同条款。

Vera Rubin 是单个 GPU 还是机架系统?

搜索者通常会说“NVIDIA Vera Rubin GPU”,但买家应将其视为一个平台。其关键的公开系统是 DGX Vera Rubin NVL72,这是一个机架级系统,包含 72 颗 Rubin GPU、Vera CPU、NVLink 交换、网络和软件。

我应该等待 Vera Rubin,还是使用模型 API?

如果你的工作负载需要直接硬件控制、专有训练或机架级拓扑,那么请等待 Vera Rubin。如果你现在就需要生产输出,并且你的主要约束是可靠性、路由、计费和评估,而不是拥有 GPU 基础设施,那么请使用模型 API。

已检查来源

  • NVIDIA DGX Vera Rubin NVL72 产品页面和规格:https://www.nvidia.com/en-us/data-center/dgx-vera-rubin-nvl72/
  • NVIDIA Newsroom,《NVIDIA Vera Rubin Ramps Into Full Production to Power Agentic AI Factories Worldwide》,2026 年 5 月 31 日:https://nvidianews.nvidia.com/news/vera-rubin-full-production-agentic-ai-factory
  • Flatkey Cloud GPU 主题图谱和活动上下文:seo/flatkey-cloud-gpu-topic-map-current.csv