发生了什么
NVIDIA 公布 推理软件优化(DeepSeek V4性能提升5倍)
为什么值得关注
差异点:展示了 Blackwell 推理软件在部署后持续优化带来的量化成本下降,值得关注其实际效果。
信息来源
以下内容来自公开来源,可打开原文继续核验。
01
NVIDIA推理软件优化降低token成本
NVIDIA 公布其推理软件栈在 Blackwell 上一个月内将 DeepSeek V4 性能提升高达 5 倍,token 成本降至之前的约五分之一,整体吞吐量提升 20 倍,且持续优化降低成本。
打开原始来源 ↗