英伟达发布多模态Nemotron,面向专用智能体
NVIDIA发布Nemotron 3.5 Super VL,将推理、工具调用和文本、图片、文档、视频理解放入同一模型。它采用1200亿总参数、120亿激活参数的混合专家结构,并提供NeMo定制路线及配套开放数据,适合针对业务流程后训练。
要点
- 统一文字和视觉任务
- 1200亿总参数、120亿激活
- 提供后训练方法与数据集
发生了什么
NVIDIA推出Nemotron 3.5 Super VL,把推理、工具使用和文本、图片、文档、视频理解整合在同一模型中。它采用1200亿总参数、120亿激活参数的混合专家结构,并提供基础、后训练和量化检查点,以及训练数据与相关方法。1
这次发布更适合从“能否做专门业务”理解,而不是只把它当成又一款通用聊天模型。
具体是什么
官方重点讨论可定制的企业智能体,例如读取票据、理解文档版面和分析视频。开发者可以用NeMo体系进行监督微调、低秩适配或强化学习,再通过支持的推理环境部署。1
对小团队来说,第一步仍是验证现成模型是否已经足够。若模型错误来自输入不完整、字段定义不清或工具结果混乱,先整理工作流可能比立即训练更有效。
总参数与激活参数也不能混为一谈。实际运行除了计算,还要考虑权重、上下文和并发带来的内存需求;具体配置应对照官方部署资料。
怎么用
先选择一个范围窄、能验证的任务,例如从固定格式的收据中提取商家、日期和金额。准备正常、模糊、缺页及格式变化的样本,并保留人工确认的答案。
通过发布页中的模型与部署入口运行基础测试,要求结构化输出和缺失值标记。1 检查模型是否会编造看不清的字段,是否把单位或日期格式理解错,以及同一输入多次运行是否稳定。
如果错误集中在业务术语或固定规则,再评估小规模定制。训练数据与测试数据应分开,并保留未见过的真实样本。定制后同时测目标任务和原有能力,避免只改善一项指标却损伤其他行为。
意味着什么
我的判断是,多模态与工具使用合在同一模型里,有机会减少不同系统之间反复转交材料的复杂度。文档里的表格、图片和文字可以在同一流程中被理解,再交给业务工具处理。
但产品价值并不来自模型支持的模态数量。一个能稳定处理几种常见单据的小工具,往往比同时支持许多输入却经常出错的演示更容易落地。
对于有自有数据的团队,公开训练与部署资料也提供了更具体的研究路径:可以从错误样本出发,逐步确定是否值得投入训练。
局限与风险
官方吞吐与客户案例对应特定硬件、任务和训练条件,不能当作所有部署的预期收益。1 开放模型也不消除计算、存储和维护费用。
本文没有部署或微调该模型。建议先确认输入资料的使用权限,保留可回放的评测样本,再逐步增加自动执行范围;涉及财务或客户数据的最终记录,应有独立核对机制。
为什么值得看
减少在文本模型与视觉模型之间切换,为有自有数据的团队提供可定制基础。
谁会受影响
开发文档识别、视频分析和企业专用智能体的团队会受到影响。
今天就能怎么试
从技术博客进入模型与数据集页面,先运行文档理解示例;再用NeMo的监督微调或LoRA路线验证小规模业务样本。
原始来源
1NVIDIA Nemotron 3.5 Super VL Powers Specialized Agents with Multimodal Reasoning · NVIDIA Technical Blog · 2026年10月16日✓ 已打开核对本条由 AI 根据上面的原始来源整理,经编辑审核后发布。数字和结论以原文为准,发现错误欢迎反馈。
相关动态
Gemini 4 Argon正式开放,开发者可接入API
10月13日,谷歌扩大Gemini 4 Argon的开放范围,开发者可通过AI Studio等入口使用。首发标准输入和输出价格为每百万词元2美元、10美元,缓存输入优惠95%;Gemini应用和Antigravity的使用还取决于订阅等级。
MOSS 开放生图模型,支持中英长文字与复杂排版
MOSS-Image 结合 50 亿参数扩散模型和意图感知提示增强,重点处理长段中英文与信息密集图形。技术报告提供文字和布局评测,模型页已给出 Base、SFT 及运行说明,HF Space 也可查看并尝试带布局要求的生成流程。适合先检查文字分组效果。
DeepSeek更新V4.1闪电模型,降低编程任务成本
DeepSeek 发布 V4.1-Flash-1017,并同步更新网页、应用和接口,针对 Harness 等执行环境优化任务表现、输出长度与耗时。中文实测展示三维网页和游戏制作,同时出现建筑细节偏差;低价与成功交付仍需按完整任务一起评估。
OpenAI发布GPT-6.1 Sol,主打低价智能体
OpenAI于9月29日推出GPT-6.1 Sol,面向编程、电脑操作与专业工作。标准API每百万输入和输出词元分别为2美元、10美元,缓存输入为0.10美元;官方称部分任务表现接近Astra,已进入ChatGPT Work、Codex和API。