Cost, Billing, and Ops2026年10月13日Flatkey Team

NVIDIA Blackwell Ultra B300:与 B200 相比有哪些变化?

面向 AI 基础设施团队的实用 NVIDIA B300 Blackwell Ultra 跟踪指南,对比 B300 规格、发布状态、价格注意事项以及相较 B200 的工作负载适配性。

NVIDIA Blackwell Ultra B300:与 B200 相比有哪些变化?

NVIDIA Blackwell Ultra B300:与 B200 相比有哪些变化?

实际答案是:NVIDIA B300 Blackwell Ultra 主要通过内存余量、系统网络、可维护性以及新的 DGX B300 平台设计来改变 B200 的决策逻辑。它并不是一个简单的“B200,只是所有数字都更高”的升级。

在官方 DGX B300 用户指南中,NVIDIA 将该系统列为配备八块 NVIDIA B300 Blackwell Ultra GPU 和 8 x 288 GB GPU 内存,总计 2.3 TB。更早的 DGX B200 用户指南列出了八块 NVIDIA B200 GPU,总 GPU 内存为 1,440 GB。这使得 NVIDIA B300 Blackwell Ultra 成为更有吸引力的选择,尤其适用于长上下文推理、大型 KV cache、更大的批量,以及在 B200 上受内存限制的模型部署。它并不会自动让每一种训练或推理工作负载都更便宜。

检查日期:2026 年 10 月 13 日。

NVIDIA B300 Blackwell Ultra:快速答案

NVIDIA B300 Blackwell Ultra GPU 是 NVIDIA DGX 系统产品线中继 B200 之后、以内存为重点的 Blackwell Ultra 阶段。在 DGX B300 系统中,与 DGX B200 最明显的变化是 GPU 内存:根据 NVIDIA 公布的 DGX 总量数据,单 GPU 类别为 288 GB,而不是 180 GB。

当你的 B200 部署已经触及内存边界时,应优先将 B300 作为基准参考:

  • 具有大 KV cache 的长上下文 LLM 推理。
  • 张量并行度受内存驱动的超大模型服务。
  • 需要更大部署灵活性的多租户端点。
  • 受 activation memory、checkpoint memory 或 micro-batch size 限制的训练或微调任务。
  • 800 Gb/s 集群链路、前置 I/O、电源冗余和可维护性都很重要的 AI factory 机架。

如果工作负载已经能够适配、B200 容量明显更便宜或更快可用,或者你的瓶颈在于软件、存储、数据加载或网络调度而非 GPU 内存,那么应优先将 B200 作为基准参考。

如需更深入的基准比较表,可使用 Flatkey 另文的 B300 vs B200 comparison。本页面重点介绍 NVIDIA B300 Blackwell Ultra 平台发生了哪些变化,以及买家应如何解读规格、发布状态和价格。

从 B200 到 B300 有哪些变化?

领域 DGX B200 DGX B300 变化内容
GPU 代际 NVIDIA B200,Blackwell NVIDIA B300 Blackwell Ultra B300 是 Blackwell Ultra 阶段,不是从 Hopper 到 Blackwell 的迁移。
GPU 数量 8 块 GPU 8 块 GPU 相同的 DGX 规模比较基准。
GPU 内存 总计 1,440 GB 8 x 288 GB = 总计 2.3 TB B300 最明显的升级是内存余量。
推测的单 GPU 内存 180 GB 级别 288 GB 级别 对 KV cache、长上下文、批量大小和模型放置很重要。
列出的 FP8 / FP4 系统性能 DGX B200 产品页面列出 72 PFLOPS FP8 和 144 PFLOPS FP4 DGX B300 指南列出 72 PFLOPS FP8 training 和 144 PFLOPS FP4 inference 公开峰值计算并不意味着 B300 在所有场景下都更快。
集群网络 ConnectX-7,在 B200 指南/产品页面中最高可达 400 Gb/s ConnectX-8,B300 指南中为 8 x 800 Gb/s InfiniBand/Ethernet B300 更新了集群网络路径和系统 I/O 设计。
CPU B200 指南中为 2 x Intel Xeon 8570 B300 指南中为 2 x Intel Xeon Platinum 6776P 主机平台刷新。
系统内存 2 TB,可配置到 4 TB 默认 2 TB,最高 4 TB 主机内存范围相近。
功耗 最大 14.3 kW,六个 3.3 kW PSU 14.5 kW,12 个 3.2 kW PSU 或 DC busbar 版本 B300 增加了更强的冗余以及面向 busbar 的部署选项。
缓存盘 U.2 缓存盘 E1.S 缓存盘 服务与平台封装发生了变化。
操作系统 产品页面上为 DGX OS / Ubuntu 基于 Ubuntu 24.04 LTS 的 DGX OS 7 B300 采用更新的 DGX OS 基线交付。

来源:NVIDIA 的 DGX B300 user guide、DGX B200 user guide,以及 DGX B200 product page。

NVIDIA B300 Blackwell Ultra 的关键规格

只有将 NVIDIA B300 Blackwell Ultra specs 映射到具体工作负载时,标题中的规格才真正有用。面向买家的精简清单应为:

规格 重要性
8 x NVIDIA B300 Blackwell Ultra GPUs 应在系统层面比较 B300,而不是把它当作一个孤立的 GPU 标签来看。
8 x 288 GB HBM3e,合计 2.3 TB 这是最可能改变 LLM 服务设计的规格。
72 PFLOPS FP8 训练,144 PFLOPS FP4 推理 对能力定位有帮助,但不能替代工作负载回放测试。
2 x 第五代 NVLink 互连 对于分片模型,多 GPU 拓扑仍然很重要。
8 x ConnectX-8 集群网卡,8 x 800 Gb/s InfiniBand/Ethernet 对多节点训练和横向扩展推理架构很重要。
2 x BlueField-3 DPU,400 Gb/s InfiniBand/Ethernet 与存储和管理网络设计相关。
14.5 kW 系统功耗 功耗、散热和机架规划是 B300 真实价格的一部分。
AC/PDU 和 DC/busbar 版本 采购时需要确认提供方提供的是哪种物理供电设计。

对于 LLM 团队来说,NVIDIA B300 Blackwell Ultra GPU 应首先被视为一次内存容量变化。如果你的工作负载在 B200 上已经足够从容,并且受限于带宽、调度或内核,那么 B300 仍然需要通过已接受输出成本来证明自己。

内存是 B300 的主要变化

从 B200 到 NVIDIA B300 Blackwell Ultra 最大的实际变化是每 GPU 内存。

B200 的 180 GB 级内存已经很大,但长上下文推理会迅速消耗内存。生产级 LLM 端点需要为模型权重、KV cache、请求批处理、运行时缓冲区、适配器、提示长度异常值的安全余量以及框架开销预留空间。当这些部分接近 B200 的上限时,B300 的 288 GB 级内存可以简化服务设计。

这种收益可能体现在:

  • 大型模型所需的张量并行分片更少。
  • 在目标上下文长度下更高且更稳定的并发。
  • 在 KV cache 压力迫使权衡之前,支持更大的提示窗口。
  • 更少的内存不足重试和更少浪费。
  • 更适合多租户模型端点的部署。
  • 为 adapter、reranker 或多模态侧路径留出更多空间。

这就是为什么不能把 “NVIDIA B300 Blackwell Ultra specifications” 仅仅看作一份通用速度清单。真正有用的问题是:B300 是否会改变你的工作负载所需的 GPU 数量、副本数、重试次数或已接受输出数。

哪些方面并没有明显变化?

官方公开表格也避免了过度宣称。

DGX B300 和 DGX B200 都是八 GPU 的 DGX 系统。NVIDIA 的 B300 指南列出了 72 PFLOPS FP8 训练和 144 PFLOPS FP4 推理。NVIDIA 的 B200 产品页也列出了 DGX B200 相同的 FP8 和 FP4 系统级 headline 数值。这意味着买家不能仅凭峰值算力就假设 B300 能在所有工作负载上胜出。

更稳妥的理解是:

  • 当额外内存改变了部署位置、批处理、分片或重试率时,B300 可能取胜。
  • 当 B200 已经能够容纳模型并保持高利用率时,B300 可能并不会赢得足够多。
  • 如果发布初期产能稀缺,B300 的价格和可用性可能会抹平规格优势。
  • 软件栈差异可能压过硬件差异。

对于推理,请基准测试 prefill、decode、首 token 时间、每输出 token 时间、p95 和 p99 延迟、最大稳定上下文窗口,以及每小时已接受响应数。对于训练,请基准测试完整任务成本,而不只是每秒样本数。

NVIDIA B300 Blackwell Ultra 发布日期与可用性

搜索者经常会问 NVIDIA B300 Blackwell Ultra release date。可操作的答案不是某个面向消费者式的单一上市日期。

截至 2026 年 10 月 13 日,NVIDIA 已在网上公开了 DGX B300 文档,包括 DGX B300 用户指南和系统功能摘要。对于云 GPU 买家来说,这并不意味着今天每家服务商都有可租用的 B300 产能。可用性取决于具体系统、机架供电设计、区域、预留模式、服务等级以及提供方分配。

在把 B300 当作“可用”之前,向提供方提出这些问题:

向提供方提问 重要性
提供的产能是 DGX B300、HGX B300、GB300,还是其他 Blackwell Ultra 系统? 系统设计可能比 B300 标签更重要。
它是普遍可用、私测预览、仅报价,还是仅限预留容量? 在云 GPU 销售中,“可用”可能意味着非常不同的事情。
包含哪个区域和网络 fabric? 多节点训练和对延迟敏感的推理取决于位置和网络。
可以预留整机、部分系统,还是只能预留托管作业? 调度控制会影响成本和可靠性。
在承诺前包含哪个基准测试窗口? B300 应在长期采购前证明已接受输出成本。
适用什么支持 SLA 和更换路径? 停机时间也应计入真实价格。

如果你的工作负载并不依赖自定义权重或低层级 GPU 控制,那么在签约前,应将 B300 报价与托管模型/API 路径进行比较。Flatkey 让团队只需一个密钥、一个余额、一张账单、使用记录,并可在 300+ 官方模型和 1,000+ 按次付费工具之间路由。当 B300 产能稀缺、昂贵或在运营上还不够成熟时,这样的模型/API 基线就很有价值。

NVIDIA B300 Blackwell Ultra 价格:应比较什么

对于大多数云买家来说,并不存在一个有用的、单一的公开NVIDIA B300 Blackwell Ultra 价格。DGX 系统价格、服务商按小时租用价格、预留集群报价以及托管推理报价,都是不同的产品。

不要问“B300 的价格是多少?”,而应将每份报价统一换算为已完成工作负载成本:

accepted_output_cost =
  GPU hourly or committed capacity cost
  + storage, snapshots, egress, support, idle time, queue time, retries
  + engineering and migration overhead
  divided by accepted responses, accepted tokens, or completed jobs

对于 NVIDIA B300 Blackwell Ultra GPU 容量,请索取以下明细:

  • 按需小时价格。
  • 预留或承诺价格。
  • 最低承诺期限。
  • 整机访问与部分访问。
  • 存储、快照和出站流量成本。
  • 节点间网络与 fabric 费用。
  • 支持与更换 SLA。
  • 空闲时间计费。
  • 基准测试或老化测试期。

然后使用相同的输出指标,将 B300 与 B200 以及模型/API 基线进行比较。关于租赁部分的工作表,可将本文与 Flatkey 的 GPU 租赁价格指南、GPU 集群 TCO 指南以及GPU 云与模型 API 对比搭配阅读。

应优先测试 B300 的工作负载

当内存是瓶颈时,应将 NVIDIA B300 Blackwell Ultra 作为首选基准候选项。

工作负载 B300 可能带来帮助的原因 要测量什么
长上下文 LLM 推理 在高并发下,KV cache 可能主导内存占用。 稳定的上下文长度、p95 延迟、每小时已接受响应数。
超大模型服务 更多 HBM 可减少切分或简化部署位置。 GPU 数量、张量并行度、p99 延迟、错误率。
多租户推理 更多内存可以让混合模型/适配器更易调度。 利用率、隔离性、尾延迟、驱逐/重试率。
带激活压力的训练 更多内存可支持更大的 micro-batch 或减少重计算。 已完成作业成本、墙钟时间、失败运行率。
多模态工作负载 更大的输入状态和模型组件会造成内存压力。 批大小、内存余量、达到质量目标时的吞吐量。

当模型可以轻松放下、你的服务商已有成熟的 B200 容量,或者 B300 报价仍处于上市窗口高价时,优先使用 B200。一个利用率高的 B200 系统,可能胜过一个利用率低的 B300 系统。

B300 报价采购检查清单

在购买或租用 B300 容量之前,要求系统级答案:

  1. 确认准确的 SKU 和平台:DGX B300、HGX B300、GB300,或其他 Blackwell Ultra 配置。
  2. 确认扣除软件和多租户开销后的每块 GPU 可用 HBM。
  3. 确认服务商提供的是整机、GPU 切片、容器还是托管作业。
  4. 确认 NVLink、NVSwitch、InfiniBand、Ethernet 以及跨节点拓扑。
  5. 确认报价系统中是否包含 ConnectX-8 和 800 Gb/s 链路。
  6. 确认私有集群的供电、散热和维护窗口。
  7. 确认存储、快照和出站流量定价。
  8. 确认预留条款、取消条款和容量替换 SLA。
  9. 在 B200 和 B300 上运行同一套回放测试。
  10. 如果不需要直接的 GPU 控制,则将两者都与模型/API 路径进行比较。

对于相邻的架构决策,可使用 Flatkey 的 GB200 与 B200 对比、什么是 AI 工厂以及AI GPU 选型指南。

基准测试模板

在将 NVIDIA B300 Blackwell Ultra 与 B200 进行测试前,请复制以下内容:

model_id:
model_size:
weights_precision:
serving_runtime:
gpu_system: DGX B200 | DGX B300 | other
gpu_count:
usable_hbm_per_gpu:
context_input_p50:
context_input_p95:
output_tokens_p50:
output_tokens_p95:
target_ttft_ms:
target_tpot_ms:
concurrency_ladder:
kv_cache_policy:
quality_eval_suite:
hourly_or_committed_cost:
storage_network_support_cost:
accepted_responses_per_hour:
accepted_output_tokens_per_hour:
cost_per_1m_accepted_output_tokens:
oom_or_retry_rate:

不要让服务商用通用的峰值基准来替代这次回放。B300 的价值来自你实际能够运行的工作负载,而不是你能截图的规格参数行。

目前何时可先跳过 B300

在以下情况下,可跳过或延后采购 NVIDIA B300 Blackwell Ultra:

  • 你当前的模型/API 使用情况仍不稳定。
  • 你频繁更换基础模型。
  • 你不需要自定义权重。
  • 在流量峰值之外,利用率会很低。
  • 你缺乏用于事故和升级的 GPU 运维覆盖。
  • 服务商无法提供系统级拓扑和成本拆分。
  • B200 已经以更低的已接受输出成本满足延迟和质量目标。

在这些情况下,先使用托管模型/API 路由,收集真实的请求量和质量数据,然后再用更准确的预测回头评估 B300。Flatkey 通过在官方模型和工具之间为工程和财务提供一份统一的使用账本,帮助完成这一路径,直到他们决定投入固定的 GPU 容量。

常见问题

什么是 NVIDIA B300 Blackwell Ultra?

NVIDIA B300 Blackwell Ultra 是 NVIDIA 在 DGX B300 系统中提供的 Blackwell Ultra GPU 代际。NVIDIA 的 DGX B300 用户指南列出了八块 B300 Blackwell Ultra GPU,每块配备 8 x 288 GB HBM3e,总 GPU 内存为 2.3 TB。

B200 到 B300 有哪些变化?

B200 到 B300 最大的变化是内存余量:DGX B300 标称总 GPU 内存为 2.3 TB,而 DGX B200 标称总 GPU 内存为 1,440 GB。DGX B300 还将平台更新为 ConnectX-8 集群网络、800 Gb/s 链路、更高代的 CPU、DGX OS 7,以及重新设计的供电/服务方案。

NVIDIA B300 Blackwell Ultra 比 B200 更快吗?

不一定。对于受内存限制的工作负载,B300 可能更快或更便宜,尤其是长上下文推理和大模型部署。如果工作负载在 B200 上已经能容纳,并且主要受软件、数据加载、调度或利用率限制,那么 B300 必须在工作负载回放中证明自己的优势。

NVIDIA B300 Blackwell Ultra 的发布日期是什么时候?

对于云采购方来说,并不存在一个单一且实用的零售式发布日期。截止到 2026 年 10 月 13 日的这次核查,NVIDIA 的 DGX B300 文档已经公开,但供应商是否可用取决于地区、系统设计、预订模式和服务等级。

NVIDIA B300 Blackwell Ultra 的价格是多少?

除非你的供应商为确切系统和地区公布了具体租赁费率,否则应将 B300 定价视为按报价确定。比较 B300、B200 和托管模型/API 选项时,要以已接受输出成本为准,其中包括存储、网络、支持、空闲时间、重试以及工程开销。

结论

NVIDIA B300 Blackwell Ultra 的故事并不是“更新就一定更好”。从 B200 到 B300 的真正变化是内存余量和系统设计。如果 288 GB 级别的 GPU 内存改变了你的服务拓扑、训练方案、上下文窗口或重试率,那么 B300 就应该排在基准测试队列的最前面。如果 B200 已经足够并且运行高效,那么 B300 必须通过已接受输出成本来证明自己的价值。

在承诺使用 B300 容量之前,请在 B200、B300 以及托管模型/API 路径上运行同样的回放。Flatkey 为你提供模型/API 基线:一个密钥、一个余额、一张账单、官方模型路由,以及覆盖 300+ 模型和 1,000+ 工具的使用记录,因此 GPU 决策会与最简单的生产替代方案进行衡量。