huggingface.co·2026/10/07·nvidia
NVIDIA Nemotron-3.5-Embed-1B-BF16 是面向多语言多模态问答检索的嵌入模型,可把文档页图像、文本或图文组合编码为 2048 维向量,查询仅用文本;视觉编码器基于 Pixtral(初始自 Ministral-3-3B-Instruct),语言部分继承 Nemotron-3-Embed-1B-BF16 并冻结,从而保留文本嵌入空间并新增图像检索,共 1.55B 参数,由 Nemotron-3.5-Embed-8B-BF16 以 COS 与 MSE 损失蒸馏。官方评测中,ViDoRe V3 文本检索 NDCG@10 达 57.80,高于 Qwen3-VL-Embedding-2B 的 48.31,MIRACL-VISION 图像检索微弱领先 Qwen3-VL-Embedding-8B;可经 Transformers、Sentence Transformers、vLLM 在 Ampere/Blackwell/Hopper GPU 运行,上下文最长 32768 tokens,截断维度需重做 L2 归一化,按 OpenMDW 许可商用或非商用,但不保证每次检索正确。
为什么重要 1B 级支持文档页图像与 34 语言文本,OpenMDW-1.1 商用,直接覆盖多模态 RAG 向量化落地。适合 做多模态 RAG、语义搜索、向量库选型与 agentic retrieval 的工程师
参数量
总参数
含图像样本
图像含或不含文本
纯文本样本
文本训练数据
文本评测语言
覆盖列表
图像评测语言
覆盖列表
注释 · 训练数据来自公开可商用及合成数据集;文本 LM 沿用 Nemotron-3-Embed-1B 数据出自 Training Dataset / Model Arc
$ uv pip install torch "transformers==5.20.0" accelerate pillow
$ uv pip install packaging ninjauv pip install flash-attn --no-build-isolation
$ uv pip install "vllm==0.32.0" "transformers==5.19.0" pillow httpx numpy
EVIDENCE / METHODS
表格
官方称 Nemotron-3.5-Embed-1B-BF16 在 术语解释视觉文档检索基准,含 8 个公开与 2 个私有专业领域数据集。 image 得 58.02,四项全超 Qwen3-VL-Embed
| 模型 | 术语解释视觉文档检索基准,含 8 个公开与 2 个私有专业领域数据集。 image | 术语解释视觉文档检索基准,含 8 个公开与 2 个私有专业领域数据集。 text | 术语解释视觉文档检索基准,含 8 个公开与 2 个私有专业领域数据集。 image+te | 术语解释18 种语言的多模态视觉检索数据集,是文本检索集 MIRACL 的扩展。 imag |
|---|---|---|---|---|
| Qwen3-VL-Embedding-2B | 52.89 | 48.31 | 51.97 | 58.42 |
| Nemotron-3.5-Embed-1B-BF16 | 58.02 | 57.80 | 58.82 | 68.93 |
| Qwen3-VL-Embedding-8B | 58.29 | 53.69 | 57.03 | 68.33 |
| Nemotron-3.5-Embed-8B-BF16 | 60.39 | 60.65 | 61.47 | 72.64 |
注释 · 所有值均为 NDCG@10;Nemotron 图像最长边 1120,Qwen 按 max_pixels 1,843,200 评测出自 Evaluation Dataset