英伟达发布Nemotron 3多模态大模型智能体效率提升9倍

AI创作导航管理员 LV4 资深连续登录30天萌新

5 个月前

风向

201

2026年4月29日，英伟达正式发布开放式多模态大模型Nemotron 3 Nano Omni，采用30B-A3B混合专家架构，原生集成音视觉编码器无需额外感知模型，推理效率较传统方案提升9倍，在复杂文档解析、音视频理解等领域表现优异，跻身六大权威评测榜单前列，H Company首席执行官Gautier Cloix称其为智能体技术的重要突破。

过去两年AI智能体的商业化落地始终卡在多模态感知的效率瓶颈——大多数行业方案需要将大语言模型与独立的图像、音频、视频识别模型串联调用，不仅部署成本高，推理延迟更是难以满足实时交互需求，直接限制了智能体在办公、工业检测等场景的规模化应用。

随着AI应用从单一场景向复杂交互场景延伸，行业对多模态模型的要求已经从“能识别”转向“快响应、低成本”。此前多数厂商推出的多模态方案普遍采用“大模型+外挂感知模块”的拼接架构，用户调用时需要完成多次模型间的信号传输与格式转换，单次推理的算力消耗是纯文本模型的3-5倍，且精度往往受限于感知模块的适配效果。

本次英伟达推出的Nemotron 3 Nano Omni最大的革新，就是将视频、音频、图像、文本的推理能力完全整合到同一模型框架中，采用30B-A3B混合专家架构原生集成视觉与音频编码器，完全不需要依赖额外的感知模型支持。

根据官方披露的测试数据，该模型的大规模推理效率较传统拼接方案提升9倍，能够直接完成全高清屏幕录像的实时解读，在复杂文档解析、长视频内容理解、多轮音视频交互等测试中的表现，已经跻身六大全球权威多模态模型评测榜单的前列。

作为开放式模型，Nemotron 3 Nano Omni已经向企业级开发者开放调用权限，开发者不需要再单独适配多类感知模型，即可快速搭建具备全场景感知能力的AI智能体。

H Company首席执行官Gautier Cloix表示，基于该模型的多模态处理能力，团队已经实现了此前无法达成的多源数据实时解读能力，这一技术突破将直接推动智能体的商业化落地进程。目前已经有超过30家企业正在测试该模型在办公智能助手、工业视觉质检、数字人实时交互等场景的落地效果。

多模态大模型 AI智能体 3 英伟达混合专家架构 Nano Nemotron Omni

本文基于公开信息分析整理，仅供参考。更多AI工具动态与行业解读，请持续关注本站更新。