登录体验完整功能(收藏、点赞、评论等) — 已累计有 12796 人加入

英伟达推出Audex统一音频文本大模型 破解多模态能力失衡痛点

详情页推荐

2026年7月8日,英伟达正式发布统一音频-文本大语言模型Nemotron-Labs-Audex-30B-A3B(简称Audex)。该模型基于纯文本MoE(混合专家模型)架构搭建,采用单一Transformer解码器,训练数据涵盖1574亿音频token与3205亿文本token,解决了此前多模态模型音频能力升级时文本逻辑下降的行业痛点,可实现音频理解与文本能力的高效平衡。

配图

近两年多模态大模型的迭代主要集中在图文领域,音频交互能力的升级始终存在明显短板。行业普遍的开发逻辑是在原有纯文本大模型的基础上,额外新增独立的音频编码器模块接入,这种方案看似快速实现了音频理解能力,但往往会挤占原有文本模型的参数资源,导致模型的文本推理、逻辑表达能力出现明显下滑,语音助手“听得懂指令却答不出合理内容”的问题频频出现,也让智能座舱、实时翻译等强语音交互场景的落地效果大打折扣。

免责声明:本网站AI资讯内容仅供学习参考,不构成任何建议,不对信息准确性与完整性负责。