Signal Brief

Audex:30B总参音频MoE

NVIDIA发布Audex,一个30B总参数/3B活跃参数的音频-文本MoE模型,基于Nemotron-Cascade-2构建。它在BigBenchAudio(90.0)、Audio Entailment AudioCaps(95.6)和CMM(90.3)上取得高分,同时保持文本推理能力。模型覆盖音...

twitter关注列表 ModelScope (@ModelScope2022) 发布 2026-07-07 收录 2026-07-07 观察

一句话判断

Audex通过MoE结构在30B总参下仅激活3B参数,实现音频多模态高效扩展;值得关注其音频理解与生成的一体化架构。

核心信息

NVIDIA发布Audex,一个30B总参数/3B活跃参数的音频-文本MoE模型,基于Nemotron-Cascade-2构建。它在BigBenchAudio(90.0)、Audio Entailment AudioCaps(95.6)和CMM(90.3)上取得高分,同时保持文本推理能力。模型覆盖音频理解、ASR、语音翻译、TTS、语音生成和音频生成,训练使用157.4B音频tokens和320.5B文本tokens,采用多阶段SFT+级联RL。

原始内容

Meet Audex: a 30B total / 3B active audio-text MoE. 🎧 Built on Nemotron-Cascade-2-30B-A3B, it adds audio I/O with marginal or no text regression. 🤖 https://t.co/3rAW2TGAZi 📄 https://t.co/uTEN8ZxyzG 🏆 Benchmarks: 90.0 on BigBenchAudio, 95.6 on Audio Entailment AudioCaps, and 90.3 on CMM, while keeping strong text reasoning from Nemotron-Cascade-2. What it covers: • Listen: audio understanding, ASR, and speech translation • Speak: text-to-speech and speech-to-speech generation • Create: text-to-audio generation for general audio • Reason: thinking and instruct modes, with up to 1M-token context 🔧 Training: multi-stage SFT + cascaded RL over 157.4B audio tokens and 320.5B text tokens. 📄 License: NVIDIA Oneway Noncommercial License. ![photo](https://pbs.twimg.com/media/HMowoaSWsAAiF4E.jpg) ![photo](https://pbs.twimg.com/media/HMowoePXgAAZs6p.jpg)

相关动态

01

BestBlogs 早报 · 07-18

月之暗面发布Kimi K3,2.8万亿参数,896选16的Stable LatentMoE,上下文100万token,接近Fable-5但仍落后最强闭源模型,完整权重7月27日前开源;VentureBeat调查显示54%企业已发生AI代理安全事件;xAI开源Grok Build(84万行Rust代码)并残留上传用户代码痕迹;Cursor评...

twitter关注列表2026-07-17#AI#模型发布#开源
观察
02

Kimi K3 编码代理评测

Artificial Analysis发布Kimi K3在编码代理指数上的评测结果:得分57,排名第5,性能与GPT-5.6 Terra和GPT-5.5持平(57),超过Opus 4.8(55),略低于Grok 4.5(58)和Fable 5(59);成本平均3.18美元/任务,比GPT-5.6 Sol便宜55%。

twitter关注列表2026-07-17#AI模型#评测
观察
04

Runway Agent 在第三方评测中全面领先

Physion Labs 发布 Physion-Arc 1.0 基准测试,对 Runway、Luma、MiniMax、Kling、Utopia 和 TapNow 六款 AI 视频代理进行独立人类评估,使用 30 个电影提示和 16 个指标。Runway Agent 2.0 在叙事连贯性、电影语言和制作质量三项核心维度全部排名第一。

twitter关注列表2026-07-17#评测#多模态#模型
观察
05

Claude Managed Agents 支持500个技能项目升级

Anthropic 在Claude 3系列推出2024年2月新特性,实现代理系统技能数量扩展至500项,增强自定义化程度。更新后的API参数文档显示请求头需包含新版本控制标识符v20240201。相较Claude 2的100技能限制,新版本实现10倍扩容空间,核心优化体现在事件触发策略更新与上下文处理模块重构。

twitter关注列表2026-07-17#技术更新#产品改进#多模态
观察