DeepSeek R1 — MI300X vs MI355X 每美元性能
MI300X(AMD CDNA 3)与 MI355X(AMD CDNA 4)在 DeepSeek R1 上的每百万 token 成本。基于所属云服务商 TCO 归一化的输出 token 性能——在各类 LLM 工作负载下的每美元性能。在每个目标交互性水平下选出更经济的 SKU。使用下方图表控件切换序列、精度和指标——交互方式与主推理图表相同。
在 DeepSeek R1 上以 36 tok/s/user 运行时,每百万 token 成本分别为:MI300X $0.99、MI355X $0.21;MI355X 每美元多产出 363% 的 token。
在 DeepSeek R1 上以 47 tok/s/user 运行时,MI300X 每百万 token 成本为 $1.42,MI355X 为 $0.30。MI355X 在此工作点上的成本效率高出 367%。
MI355X 在 DeepSeek R1 上以 58 tok/s/user 运行时领先于 MI300X——每百万 token 成本 $0.44 对 $2.33,差距达 426%。 (数据反映此 URL 的默认 1k/1k · fp8 选择——如果您在控件中更改序列、精度或模型,下方表格和图表会自动更新。)
芯片定价(所属云服务商): MI300X $0.95/chip/hr · MI355X $1.50/chip/hr. 来源: SemiAnalysis Market July 2026 Pricing Surveys & AI Cloud TCO Model.

| Metric | Interactivity (tok/s/user) | Interactivity (tok/s/user) | Interactivity (tok/s/user) |
|---|---|---|---|
| 每百万 token 美元成本 | MI300X:$0.986MI355X:$0.213 | MI300X:$1.416MI355X:$0.303 | MI300X:$2.328MI355X:$0.442 |
| Concurrency | MI300X:~31MI355X:~765 | MI300X:~17MI355X:~421 | MI300X:~8MI355X:~214 |
每百万总 token 成本(自有 - 超大规模) vs. 交互性
DeepSeek R1 0528 671B • FP4 • 8K / 1K • 来源:SemiAnalysis InferenceX™
TCO $/chip/hr: VR200: 3.61H100: 1.17H200: 1.22B200: 1.73B300: 2.26GB200: 1.86GB300: 2.31MI300X: 0.95MI325X: 1.1MI355X: 1.5RTX6000PRO: 0.68Jalapeño (Teacup): 1.47
来源: SemiAnalysis Market July 2026 Pricing Surveys & AI Cloud TCO Model
注意:分离式推理配置(如 MoRI SGLang、Dynamo TRTLLM)按解码芯片或预填充 芯片计算每百万 token 成本,而非按芯片总数计算。因此,与聚合配置进行token 成本的直接对比并不完全等价。
注意:分离式推理配置(如 MoRI SGLang、Dynamo TRTLLM)按解码芯片或预填充 芯片计算输入吞吐量,而非按芯片总数计算。因此,与聚合配置进行输入吞吐量的直接对比并不完全等价。
注意:分离式推理配置(如 MoRI SGLang、Dynamo TRTLLM)按解码芯片或预填充 芯片计算输出吞吐量,而非按芯片总数计算。因此,与聚合配置进行输出吞吐量的直接对比并不完全等价。
注意:分离式推理配置(如 MoRI SGLang、Dynamo TRTLLM)按解码芯片或预填充 芯片计算功耗,而非按芯片总数计算。因此,与聚合配置进行功耗的直接对比并不完全等价。
注意:分离式推理配置(如 MoRI SGLang、Dynamo TRTLLM)按解码芯片或预填充 芯片计算能耗,而非按芯片总数计算。因此,与聚合配置进行每 token 能耗的直接对比并不完全等价。
No data available
Please change the model, sequence, precision, date range or chip selection.
Shift+Scroll to zoom • Drag to pan • Double-click to reset • Click a point to pin tooltip
交互性(interactivity)指模型流式输出回答时,单个用户接收生成 token 的速率——即新内容出现在屏幕上的快慢。数值越高体验越流畅;运营方需要在交互性与批量吞吐量之间权衡。
在该运行点生产一百万总 token(输入 + 输出)的基础设施成本估算,按超大规模云厂商自有硬件的每小时全包成本计价。数值越低越便宜。
计算公式: $/Mtok = 每芯片小时全包成本($)× 1,000,000 ÷(3,600 × 总 tok/s/chip)
1 ATOM 引擎前景可期,但尚未用于生产环境 token 服务,仍处于早期阶段。