N
NVIDIA / nvidia/Nemotron-3.5-Rerank-8B-BF16

Nemotron 3.5 Rerank 8B BF16

NVIDIA-Reranker mit 8,38 Milliarden Parametern, veröffentlicht am 20. Oktober 2026. Er bewertet jedes Paar aus Textanfrage und Dokument, das Text, ein Seitenbild oder beides enthalten kann. Er ergänzt die erste Suche durch das Reranking der Kandidaten; er erzeugt weder Antworten noch Embeddings. Er kombiniert einen Pixtral-Bildencoder mit einem bidirektionalen Ministral3-Turm.

01 / ZUSAMMENFASSUNG

Das Wesentliche

ORIENTIERUNGMultimodales Dokument-Reranking

Primäre Verwendung angegeben oder vorsichtig aus offizieller Dokumentation abgeleitet.

KONTEXT32.768 Tokens gemeinsam für Text und Bild

Maximale Eingabekapazität bei Veröffentlichung durch die Quelle.

AUSFAHRTEin Relevanz-Logit pro Anfrage-Dokument-Paar

Dokumentierte maximale Erzeugungsgrenze.

ZUGANGHugging Face · herunterladbarer Checkpoint

Verifizierte Verfügbarkeitskanäle.

MODELLTYPReranking · Bild und Dokumente · Multimodal

Primäre Funktionsfamilie und verifizierte Spezialisierungen.

LIZENZOpenMDW 1.1

Deklarierte Bedingungen für API, Gewichte oder Self-Hosting.

02 / TECHNISCHES DATENBLATT

Limits und Integration

API-IDnvidia/Nemotron-3.5-Rerank-8B-BF16
ModelltypReranking · Bild und Dokumente · Multimodal
ZugangsmodellOffene Gewichte
LizenzOpenMDW 1.1
EinsatzEigenbetrieb mit NVIDIA-GPUs
Veröffentlichung20 OCT 2026
WissensstichtagNicht veröffentlicht
EingangText · Bild
AusfahrtBewertungen
Kontextfenster32.768 Tokens gemeinsam für Text und Bild
maximale LeistungEin Relevanz-Logit pro Anfrage-Dokument-Paar
ArgumentationInformationssuche, keine Dialoggenerierung
Veröffentlichte ToolsReranking von Kandidaten
Strukturierte AusflügeUnkalibrierte Logits; höhere Werte bedeuten höhere Relevanz
StapelverarbeitungBatch-Inferenz auf eigener Infrastruktur
Prompt-CacheNicht veröffentlicht
FeinabstimmungNicht veröffentlicht
Verifizierte PlattformenHugging Face · Transformers · Sentence Transformers · vLLM
EIGNET SICH BESSER FÜR

Semantische Suche und RAG für Berichte, Tabellen, Diagramme und Infografiken. NVIDIA nennt Textevaluationen in 34 und visuelle Evaluationen in 18 Sprachen; diese Abdeckung ist keine universelle Garantie. Verwende die genaue Checkpoint-Kennung und offizielle Präfixe für Anfragen und Dokumente. Die Beispiele unterstützen Batch-Inferenz auf eigener Infrastruktur.

SOLLTE BEOBACHTET WERDEN

Die dokumentierte Grenze beträgt insgesamt 32.768 Tokens, auch wenn die interne Konfiguration mehr Positionen nennt. Die längste Bildkante beträgt standardmäßig 1.120 Pixel und kann auf 1.540 erhöht werden. Prüfe trust_remote_code vor der Ausführung. Die Transformers-Beispiele mit Flash Attention 2 erfordern Version 5.20.0; vLLM 0.32.0 nutzt eine getrennte Umgebung mit Transformers unter 5.20.0. Inferama hat keine Inferenz ausgeführt.

03 / FÄHIGKEITEN

Was es kann

01

Orientierung

Semantische Suche und RAG für Berichte, Tabellen, Diagramme und Infografiken. NVIDIA nennt Textevaluationen in 34 und visuelle Evaluationen in 18 Sprachen; diese Abdeckung ist keine universelle Garantie. Verwende die genaue Checkpoint-Kennung und offizielle Präfixe für Anfragen und Dokumente. Die Beispiele unterstützen Batch-Inferenz auf eigener Infrastruktur.

02

Kontext

32.768 Tokens gemeinsam für Text und Bild · Ein Relevanz-Logit pro Anfrage-Dokument-Paar

03

Tools und Integration

Reranking von Kandidaten

04

Zugang

Hugging Face · herunterladbarer Checkpoint

Eingabemodalitäten
TextBild
04 / PREISE

Dokumentierte Kosten

KonzeptWertEinheit/Zustand
StandardeingabeKein offizieller API-Preis veröffentlichtStandardtarif der API
Eingabe aus dem CacheNicht veröffentlichtLesen wiederverwendeter Präfixe
Schreiben oder Speichern im CacheNicht veröffentlichtDie Bedingung variiert je nach Anbieter
StandardausgabeKosten der eigenen InfrastrukturKann Reasoning-Tokens enthalten
Batch-EingabeNicht veröffentlichtAsynchrone Verarbeitung
Batch-AusgabeNicht veröffentlichtAsynchrone Verarbeitung

Öffentliche Gewichte ohne Zugangsbeschränkung unter OpenMDW 1.1; kommerzielle Nutzung unterliegt deren Bedingungen und der Beibehaltung von Hinweisen. Die Ministral-Basismodelle behalten ihre Apache-2.0-Bedingungen. Eine gehostete kommerzielle API samt Kennung oder Preis wurde nicht verifiziert: numerische Kostenfelder bleiben leer. Der Download beseitigt keine GPU-, Speicher- und Betriebskosten.

i Die Preise ändern sich und können von Level, Region oder Kontextlänge abhängen. Überprüfen Sie die Quelle, bevor Sie eine Entscheidung treffen.

05 / BEWERTUNGEN

So lesen Sie die Ergebnisse

“

Die offizielle Modellkarte nennt ViDoRe V3 und MIRACL-VISION mit NDCG@10, veröffentlicht jedoch keine verifizierbaren Zahlenwerte für diesen Checkpoint. Wir übertragen keine Vorgängerergebnisse und erfinden keine Ranglistenplätze. Die Evaluation durch Inferama steht aus. Für die Reproduktion Revision, Datensatz, Sprachen, Kandidaten, Auflösung, Dimension, Normalisierung, Hardware und Latenz festhalten; Suche und Reranking getrennt vergleichen.

i ViDoRe V3 und MIRACL-VISION dokumentiert; keine verifizierten Zahlenwerte.

Inferama hebt nur dann ein „bestes Ergebnis“ hervor, wenn Metrik, Testsatz, Konfiguration und Datum einen gleichwertigen Vergleich ermöglichen. Die Zahlen des Lieferanten werden als Angaben aus eigener Quelle dargestellt.

06 / VERSIONEN

Chronologie

nvidia/Nemotron-3.5-Rerank-8B-BF16

Veröffentlichungsdatum laut offizieller Modellkarte; nicht mit Erstellung oder Änderung des Repositorys verwechseln.

07 / QUELLEN

Rückverfolgbarkeit