数据世界
产业资讯 宏观经济 企业动态 人物动态 科技数码 数据洞察 AI前沿 行业峰会 热点资讯

英伟达开源Nemotron 3 Embed系列模型,8B版RTEB夺冠助力AI智能体与RAG场景

2026-07-18来源:快讯编辑:瑞雪

英伟达近日宣布正式开源其最新研发的Nemotron 3 Embed系列模型,为AI智能体和检索增强生成(RAG)领域带来全新解决方案。该系列模型以开放权重形式发布,允许商业用途,并通过Hugging Face平台与NVIDIA NIM微服务向全球开发者免费开放。

针对不同应用场景,英伟达同步推出三个优化版本:旗舰版Nemotron-3-Embed-8B-BF16拥有80亿参数规模,基于Ministral-3-8B-Instruct-2512架构开发,专为金融、医疗等高风险高精度需求场景设计;高效版Nemotron-3-Embed-1B-BF16参数规模11.4亿,通过蒸馏技术从30亿参数模型压缩而来,在保持85%检索精度的同时将推理延迟降低40%;Blackwell架构优化版Nemotron-3-Embed-1B-NVFP4则采用全新量化技术,在相同精度下内存占用减少30%,吞吐量提升最高达2倍。

该系列模型配备32K超长上下文窗口,通过优化检索策略显著减少重复查询。实测数据显示,在处理复杂知识库时,模型可将无效推理触发频率降低60%,Token消耗量减少45%。这种设计特别适用于需要实时交互的智能客服、法律文书分析等场景,有效平衡了响应速度与资源消耗。

在权威基准测试中,Nemotron-3-Embed-8B-BF16表现突出:在RTEB检索嵌入基准测试中以78.5%的准确率登顶榜首,在MMTEB海量文本嵌入基准测试中取得75.5%的优异成绩。RTEB作为Hugging Face与MTEB社区联合推出的新型评估标准,专门针对RAG系统和AI智能体的实际检索质量设计,包含超过200万条真实场景测试数据。

技术文档显示,所有版本均支持FP8混合精度训练,并配备完整的微调工具包。开发者可根据具体硬件环境选择不同量化方案,在NVIDIA H100 GPU上,8B版本推理速度可达每秒1200次查询,1B版本更突破每秒3500次。模型同时支持TensorRT-LLM优化,在A100 GPU上可实现1.3倍的加速效果。

此次开源包含完整的模型权重、训练代码和部署脚本,覆盖从数据预处理到服务化部署的全流程。英伟达特别强调,通过NVIDIA NIM微服务,企业可在15分钟内完成模型部署,较传统方案提速80%。该系列模型已与LangChain、LlamaIndex等主流RAG框架完成适配,开发者可直接调用API实现知识库增强应用。

三星Galaxy Z系列折叠新机来袭!配置曝光,外观配色抢先看
结合图片来看,全新的Galaxy Z Flip8延续了以往的设计方案,采用竖折设计,外屏覆盖整个背板上部分区域,镜头和闪光灯组件采用打孔方案。 按照爆料中的说法,三星Galaxy ZFold8将配备 7…

2026-07-18

红米新机来袭:7英寸大屏搭配8K级大电池,新功能加持现已火热开售
新机不断发展,屏幕尺寸越来越大,多为6.1英寸以上,最高已突破到7.0英寸,带来更好的视野体验,而且是高分辨率、高刷新率,画面流畅丝滑,观影、玩游戏等场景体验更佳。 其中的标准版本,拥有多个亮点,比如超大屏幕…

2026-07-18

苹果手机与安卓手机播放器怎么选?一文解析不同需求下的优选方案
苹果手机和安卓手机播放器怎么选,结论很简单:只看本地文件可优先选 VLC;重视 iPhone 上的协议与手势可看nPlayer;安卓本地解码和字幕调节常见选择是 MX Player;如果你还想把网盘、本地目…

2026-07-18

谷歌NotebookLM焕新升级为Gemini Notebook,将逐步支持安全云计算机与代码执行
月 17 日消息,Google(谷歌)当地时间 16 日宣布,其 AI 笔记助理 NotebookLM 更名为 GeminiNotebook,以实现人工智能产品的品牌统一。 谷歌表示,NotebookLM …

2026-07-18