Was das exakte Modell leistet
Voxtral Mini Transcribe Realtime 3 ist ein Streaming-Audio-Transkriptionsmodell, das von Mistral AI entwickelt wurde. Seine Hauptfunktion besteht darin, den in Echtzeit empfangenen Audio-Stream inkrementell in geschriebenen Text umzuwandeln. Im Gegensatz zu Sprachsynthese-Modellen erzeugt dieses Modell kein Audio; seine Ausgabe ist ausschließlich textuell.
Das Modell arbeitet über WebSocket-Verbindungen, was eine bidirektionale und latenzarme Kommunikation zwischen Client und Server ermöglicht. Es ist für Umgebungen konzipiert, in denen die Unmittelbarkeit der Transkription entscheidend ist, wie z. B. Sprachassistenten, Live-Untertitel oder Diktiersysteme. Die spezifische identifizierte Version ist 'voxtral-mini-transcribe-realtime-3-0', die am 20. Oktober 2026 veröffentlicht wurde.
Der Begriff „Streaming“ beschreibt hier nicht nur die Übertragung von Audiodaten, sondern auch die fortlaufende Verarbeitung während der laufenden Verbindung. Der Client muss deshalb nicht erst eine vollständige Aufnahme abwarten und anschließend als Ganzes übermitteln. Stattdessen kann er fortlaufend Audiomaterial senden und Text erhalten, während die Sitzung noch aktiv ist. Das macht die Architektur für Anwendungen relevant, bei denen ein sichtbarer Zwischenstand nützlicher ist als ein einziges Transkript am Ende. Die WebSocket-Verbindung bildet dabei den Kommunikationskanal zwischen Anwendung und Dienst; sie legt für sich genommen jedoch weder die Erkennungsqualität noch eine feste Reaktionszeit fest.
Die bidirektionale Verbindung ermöglicht, dass Audio in eine Richtung übertragen und die resultierende Textausgabe in Gegenrichtung empfangen wird. Eine Anwendung kann dadurch Übertragung und Anzeige eng miteinander koordinieren, statt für jede einzelne Äußerung eine neue Anfrage zu stellen. Die tatsächliche Verzögerung hängt dennoch von mehreren Schritten ab: der Aufnahme, der Übertragung über das Netzwerk, der Verarbeitung auf dem Dienst und der Darstellung im Client. „Echtzeit“ bedeutet daher in diesem Zusammenhang eine fortlaufende Verarbeitung, nicht eine garantierte Verzögerung von null oder einen unveränderlichen Zeitwert.
Die textuelle Ausgabe grenzt das Modell von Sprachsynthese ab. Es wandelt Sprache in eine schriftliche Darstellung um, erzeugt aber keine gesprochene Antwort und ersetzt keine Komponente, die Audio aus Text erzeugt. Eine Anwendung, die nach der Transkription zusätzlich sprechen soll, benötigt dafür eine separate Funktion. Auch die Transkription selbst liefert zunächst Text; wie eine Anwendung diesen Text formatiert, speichert oder weiterverarbeitet, gehört nicht automatisch zur Funktion des Modells.
Die angegebene Modellkennung bezeichnet die hier beschriebene Variante und sollte bei einer Integration genau von ähnlich benannten Modellen unterschieden werden. Modellname, Kennung und Veröffentlichungsdatum helfen, Dokumentation und Konfiguration derselben Variante zuzuordnen. Sie sagen allein nichts darüber aus, welche Einstellungen eine konkrete Anwendung verwendet oder ob sich ein Dienst später verändert. Die technischen Angaben in der Tabelle beziehen sich auf die genannte Streaming-Variante und nicht pauschal auf sämtliche Transkriptionsangebote von Mistral AI.
Grundlegende Spezifikationen des Modells
Technische Merkmale und Eigenschaften des Transkriptionsmodells im Überblick.
| Merkmal | Detail |
|---|---|
| Identifikator | voxtral-mini-transcribe-realtime-3-0 |
| Eingabemodalität | Audio (Streaming) |
| Ausgabemodalität | Text |
| Protokoll | WebSocket |
| Veröffentlichungsdatum | 20. Oktober 2026 |
Fähigkeiten und Beispiele nach Aufgabe
Die Hauptfähigkeit des Modells ist die inkrementelle Transkription. Während das Audio übertragen wird, gibt das Modell teilweise Textfragmente zurück, die sich fortlaufend vervollständigen. Dies ermöglicht es Anwendungen, den Text auf dem Bildschirm anzuzeigen, während der Benutzer spricht, ohne auf das Ende des Satzes warten zu müssen.
Neben der grundlegenden Transkription bietet das Modell die Erkennung des Gesprächsendes (Turn-taking Detection). Diese Funktion erkennt, wann der Sprecher seine Äußerung beendet hat, was für Dialogsysteme entscheidend ist, die wissen müssen, wann sie antworten sollen. Es bietet auch Sprecher-Labels, die es ermöglichen, zwischen verschiedenen Stimmen in einem Gespräch zu unterscheiden, was jedoch nicht einer eindeutigen biometrischen Identifizierung entspricht. Die Funktion 'context_bias' ermöglicht es, die Transkription durch die Bereitstellung von Vorwissen zu beeinflussen, was die Genauigkeit bei Fachjargon oder Eigennamen verbessert.
Inkrementelle Textfragmente sind Zwischenstände des Transkripts. Ein später eintreffendes Fragment kann einen bereits angezeigten Text ergänzen oder vervollständigen; die Anwendung sollte daher zwischen vorläufigen und abgeschlossenen Teilen unterscheiden können. Eine Oberfläche, die jeden empfangenen Teil sofort als endgültig behandelt, kann unvollständige Formulierungen anzeigen oder spätere Korrekturen schwer verständlich machen. Die konkrete Darstellung bleibt Sache der integrierenden Anwendung: Sie kann Text laufend aktualisieren und erst nach einem passenden Abschluss als fertige Untertitelzeile präsentieren.
Die Erkennung des Gesprächsendes erfüllt eine andere Aufgabe als die Erkennung einzelner Wörter. Sie soll einen Hinweis darauf geben, wann eine Äußerung als beendet behandelt werden kann, damit ein Dialogsystem den nächsten Schritt einleitet. Dieser Hinweis ist für die Ablaufsteuerung nützlich, aber nicht mit einer inhaltlichen Prüfung gleichzusetzen: Er bestätigt weder, dass der Satz vollständig verstanden wurde, noch dass eine anschließende Antwort sachlich richtig ist. Anwendungen sollten den erkannten Turn-Abschluss deshalb als Steuersignal innerhalb ihres Dialogablaufs verwenden und nicht als Beleg für die Qualität des Transkripts.
Sprecher-Labels ordnen erkannte Sprachabschnitte unterschiedlichen Stimmen innerhalb eines Gesprächs zu. Sie können eine Anzeige strukturieren, indem Textabschnitte mit einem Sprecherlabel versehen werden. Ein solches Label ist jedoch keine verlässliche Feststellung der Identität einer Person und sollte nicht als biometrischer Nachweis behandelt werden. Die Unterscheidung zwischen Stimmen kann in einer konkreten Aufnahme außerdem durch Überschneidungen, wechselnde Sprechbedingungen oder Hintergrundgeräusche erschwert werden; die Labels ersetzen deshalb keine Prüfung, wenn eine korrekte Zuordnung wichtig ist.
Mit „context_bias“ lässt sich Kontext bereitstellen, der die Erkennung bei bestimmten Begriffen beeinflussen soll. Dazu können Fachausdrücke oder Eigennamen gehören, die aus dem Zusammenhang leichter einzuordnen sind. Die Funktion verändert damit die Bedingungen, unter denen das Modell mögliche Textfassungen auswählt; sie erzwingt aber nicht, dass ein vorgegebener Begriff in jedem Fall korrekt erkannt wird. Ein Kontext kann auch unpassend sein oder mit dem tatsächlich Gesprochenen konkurrieren. Deshalb sollte die Wirkung anhand repräsentativer Aufnahmen des vorgesehenen Einsatzes geprüft werden, statt eine Verbesserung als garantiert anzunehmen.
Benchmarks und veröffentlichte Methodik
Mistral AI hat eine Bewertung basierend auf dem Datensatz FLEURS veröffentlicht, wobei ein Teilmenge von 35 Sprachen verwendet wurde. Für die Sprachen Japanisch, Koreanisch und Chinesisch wird die Metrik CER (Character Error Rate) anstelle von WER (Word Error Rate) verwendet, aufgrund der Struktur dieser Sprachen.
Es ist wichtig zu beachten, dass diese Bewertung nicht die 45 Sprachen und Dialekte abdeckt, die der aktuelle Leitfaden des Modells als unterstützt angibt. Daher garantieren die Benchmark-Ergebnisse nicht die Leistung in allen verfügbaren Sprachen. Es wurden keine spezifischen Punktzahlen pro Sprache verifiziert und die Ergebnisse wurden nicht unabhängig reproduziert. Teams, die ein bestimmtes Genauigkeitsniveau gewährleisten müssen, sollten eigene Tests mit repräsentativen Aufnahmen ihres Anwendungsfalls durchführen.
FLEURS liefert den Rahmen für die veröffentlichte Bewertung: Das Modell wird anhand eines Teilbestands der dort verwendeten Sprachdaten betrachtet, nicht anhand sämtlicher Sprachen, die der Leitfaden als unterstützt aufführt. Die Zahl der bewerteten Sprachen und die Zahl der deklarierten unterstützten Sprachen beantworten unterschiedliche Fragen. Eine Aufnahme in die Unterstützungsliste bedeutet nicht automatisch, dass für diese Sprache derselbe öffentliche Benchmarkwert vorliegt oder dass sich die Ergebnisse einer anderen Sprache übertragen lassen.
WER und CER beschreiben Fehler auf unterschiedlichen Einheiten. WER zählt Abweichungen auf Wortebene, während CER Zeichen als Vergleichseinheit verwendet. Die Wahl der Kennzahl hängt unter anderem davon ab, wie sich Wörter in einer Sprache abgrenzen lassen; für Japanisch, Koreanisch und Chinesisch nennt die veröffentlichte Methodik CER. Werte aus unterschiedlichen Kennzahlen lassen sich deshalb nicht ohne Weiteres direkt vergleichen. Auch ein einzelner Wert fasst nicht alle Eigenschaften eines Transkripts zusammen, etwa die Behandlung von Namen oder die Eignung für eine bestimmte nachgelagerte Anwendung.
Ein Benchmark ist eine Messung unter festgelegten Bedingungen und kein Versprechen für jede Aufnahme. Sprache, Sprechweise, Aufnahmequalität und Gesprächsverlauf können von den Bedingungen des Datensatzes abweichen. Die veröffentlichten Angaben liefern daher einen Ausgangspunkt zur Einordnung, aber keine Gewähr dafür, dass dieselbe Leistung in einer konkreten Umgebung erreicht wird. Da keine verifizierten Einzelwerte pro Sprache und keine unabhängige Reproduktion vorliegen, lässt sich aus den vorliegenden Benchmarkangaben kein präziser Genauigkeitswert für eine bestimmte Zielsprache ableiten.
Eigene Tests sollten sowohl die Zielsprache als auch die Aufnahmen und Gesprächsformen des vorgesehenen Einsatzes abbilden. Ein sinnvoller Vergleich benötigt Aufnahmen, deren Transkripte als Referenz geprüft wurden, und eine einheitliche Auswertung mit der jeweils passenden Kennzahl. Bei einem Streaming-Modell kann zusätzlich relevant sein, wann Textfragmente eintreffen und wie sich vorläufige Ausgaben entwickeln; ein abschließender Genauigkeitswert beschreibt diese zeitliche Eigenschaft nicht vollständig. Die Tests ersetzen keine allgemeine Garantie, zeigen aber, ob das Verhalten unter den gewählten Bedingungen den Anforderungen des Teams genügt.
Preis und Bereitstellungserfordernisse
Die Kosten des Modells werden pro verarbeiteter Audiomminute berechnet. Der öffentliche Tarif beträgt 0,008 USD pro Minute. Es wird keine Gebühr für Ausgabetokens erhoben, da der Preis an die Dauer des Eingabeaudios gebunden ist. Diese Preisstruktur unterscheidet sich von der großer Sprachmodelle, die in der Regel für Eingabe- und Ausgabetokens abrechnen.
Die Bereitstellung erfolgt über die API von Mistral AI. Es wurden keine herunterladbaren Gewichte für diese Varianten veröffentlicht, was bedeutet, dass das Modell nicht lokal ohne Zugriff auf die Infrastruktur von Mistral ausgeführt werden kann. Für unternehmensweite private Bereitstellungen ist ein spezifisches Abkommen mit dem Anbieter erforderlich. Teams sollten die Abrechnungsbedingungen und die Verfügbarkeit in ihrer Region vor der Integration des Modells in die Produktion bestätigen.
Die Abrechnung nach Audiominuten richtet den Preis auf die Dauer des verarbeiteten Eingangssignals aus, nicht auf die Länge des erzeugten Transkripts. Eine längere Aufnahme verursacht bei gleichem Tarif entsprechend höhere Audiokosten als eine kürzere; der Umfang des zurückgegebenen Textes bildet dabei keine zusätzliche Tokenposition in der angegebenen Preisstruktur. Für eine grobe Planung kann ein Team den erwarteten Minutenumfang mit dem öffentlichen Minutenpreis multiplizieren. Diese Schätzung berücksichtigt jedoch nur den genannten Audiotarif und sollte nicht mit einer vollständigen Kostenberechnung für die gesamte Anwendung verwechselt werden.
Für eine belastbare Kostenschätzung muss das erwartete Audiovolumen über den betrachteten Zeitraum festgelegt werden. Dabei ist zu unterscheiden, ob nur tatsächlich verarbeitete Minuten oder auch andere Bestandteile eines konkreten Vertrags relevant sind. Der angegebene öffentliche Tarif beschreibt den Preis pro Audiominute; er beantwortet nicht automatisch Fragen zu individuellen Vereinbarungen, regionaler Verfügbarkeit oder weiteren Bedingungen. Teams sollten diese Punkte vor einer Produktionsintegration für ihre eigene Bereitstellung bestätigen, statt aus dem Minutenpreis auf identische Konditionen in jeder Region zu schließen.
Die API-Bereitstellung bedeutet, dass die Anwendung für die Verarbeitung auf den Dienst von Mistral AI zugreift. Die hier beschriebene Variante kann nach den vorliegenden Angaben nicht allein durch herunterladbare Modellgewichte lokal betrieben werden, weil solche Gewichte nicht veröffentlicht wurden. Ohne Zugang zur Infrastruktur des Anbieters steht diese konkrete Bereitstellungsform deshalb nicht für einen unabhängigen lokalen Betrieb zur Verfügung. Ein privater Unternehmenseinsatz setzt ein gesondertes Abkommen voraus; daraus folgt nicht, dass jede private Konfiguration allgemein verfügbar oder zu denselben Bedingungen erhältlich ist.
Die Wahl eines Cloud-Dienstes betrifft neben dem Preis auch die technische Abhängigkeit von der API und dem Netzwerk. Die Anwendung muss die Verbindung herstellen, den laufenden Audiostrom verwalten und mit Antworten des Dienstes umgehen. Vor einer Einführung sollten Teams deshalb neben dem Minutenpreis auch prüfen, ob die regionale Verfügbarkeit und die vereinbarten Abrechnungsbedingungen zum geplanten Betrieb passen. Diese Prüfung ist besonders wichtig, wenn ein erwartetes Audiovolumen oder die vorgesehene Region nicht durch den öffentlichen Tarif allein beschrieben wird.
Preisstruktur
Details zur öffentlichen Abrechnung des Modells.
| Posten | Preis |
|---|---|
| Eingabe-Audio | 0,008 USD / Minute |
| Textausgabe | Im Audiotarif enthalten |
| Private Bereitstellung | Spezifisches Abkommen erforderlich |
Einschränkungen, Sicherheit und Alternativen
Eine wichtige Einschränkung ist die Abhängigkeit von der Internetverbindung. Da es sich um einen Cloud-Dienst handelt, beeinträchtigen jede Netzwerkunterbrechung oder jeder Ausfall des Mistral-Dienstes die Transkription. Teams sollten Reconnect-Mechanismen und Fehlerbehandlung implementieren, um den Verlust von Audio zu vermeiden.
Aus Sicherheitsgesichtspunkten kann das Audio sensible personenbezogene Daten enthalten. Es liegt in der Verantwortung des Nutzers, die Speicherung und den Zugriff auf diese Daten zu begrenzen, die Personen über die Verarbeitung zu informieren und Fehler in lauten Umgebungen zu überprüfen. Die Sprecher-Erkennung sollte nicht mit biometrischer Identifizierung verwechselt werden, da sie die Einzigartigkeit des Individuums nicht garantiert. Als Alternativen gibt es andere Echtzeit-Transkriptionsmodelle, aber die Wahl sollte auf dem Vergleich von Genauigkeit, Latenz und Kosten für den spezifischen Anwendungsfall basieren.
Eine Unterbrechung der Internetverbindung kann den Audiostrom zum Cloud-Dienst stoppen; ein Ausfall des Dienstes kann die Verarbeitung ebenfalls verhindern. Die Transkription hängt damit von Komponenten außerhalb der Anwendung ab. Eine Wiederverbindung kann den Kommunikationsweg erneut herstellen, stellt aber nicht automatisch sicher, dass während der Unterbrechung verlorene Audiodaten nachträglich verarbeitet werden. Wenn kein Audioverlust akzeptabel ist, muss die Anwendung festlegen, wie sie nicht übertragene Abschnitte erkennt und behandelt. Fehlerbehandlung und Wiederverbindung verringern bestimmte Betriebsrisiken, garantieren aber keine ununterbrochene Transkription.
Audio kann personenbezogene und sensible Inhalte enthalten, weshalb der Umgang damit vor dem Einsatz festgelegt werden sollte. Dazu gehören der Kreis der Personen mit Zugriff, die Dauer der Speicherung und die Regeln für die Löschung. Die betroffenen Personen sollten über die Verarbeitung informiert werden; welche konkreten Anforderungen gelten, hängt von den einschlägigen Datenschutzvorschriften und der jeweiligen Verarbeitung ab. Ein technischer Transkriptionsdienst hebt diese Verantwortung nicht auf. Die Entscheidung, welche Audiodaten übertragen oder aufbewahrt werden, bleibt Teil der Gestaltung des Gesamtsystems.
Lärmtests prüfen, wie sich die Transkription unter den Bedingungen verändert, die für den vorgesehenen Einsatz relevant sind. Die allgemeine Funktionsbeschreibung quantifiziert die Leistung in besonders lauten Umgebungen nicht. Deshalb lässt sich daraus keine feste Fehlerrate oder Zusicherung für solche Aufnahmen ableiten. Teams können die Ergebnisse eigener Tests nutzen, um Grenzen zu erkennen und zu entscheiden, ob die Ausgabe in der Anwendung überprüft werden muss. Eine niedrige Latenz oder ein verfügbarer Sprecherhinweis ist dabei kein Ersatz für die Kontrolle des erkannten Textes.
Alternativen sollten mit denselben Anforderungen verglichen werden, die für das konkrete Modell gelten: Genauigkeit, Verzögerung und Kosten. Ein Vergleich ist nur aussagekräftig, wenn die Kandidaten unter vergleichbaren Bedingungen und mit denselben repräsentativen Aufnahmen geprüft werden. Unterschiedliche Preisgrundlagen oder Messmethoden können den Eindruck eines direkten Vergleichs verzerren. Eine hybride Lösung kann in Betracht kommen, wenn ein einzelnes Modell nicht alle Anforderungen erfüllt; sie ist aber nicht automatisch genauer, günstiger oder einfacher zu betreiben.
Prozess der Sicherheitsprüfung
Empfohlene Schritte vor der Bereitstellung des Modells in der Produktion.
- 01Prüfen der Art der im Audio vorhandenen personenbezogenen Daten.
- 02Konfigurieren von Richtlinien zur Speicherung und Löschung von Daten.
- 03Informieren der Benutzer über die Verwendung der Transkription.
- 04Durchführen von Robustheitstests in Umgebungen mit Lärm.
- 05Implementieren von Fehlerüberwachung und Reconnects.
Praktische Auswahlkriterien
Um zu entscheiden, ob Voxtral Mini Transcribe Realtime 3 verwendet werden soll, müssen Teams mehrere Kriterien bewerten. Erstens: die Notwendigkeit der Echtzeit-Transkription; wenn die Anwendung inkrementellen Text erfordert, ist dieses Modell geeignet. Zweitens: die Sprachunterstützung; prüfen, ob die Zielsprache zu den 45 unterstützten gehört und, wenn möglich, die Genauigkeit in dieser spezifischen Sprache überprüfen.
Drittens: die Kosten; den Tarif pro Minute mit dem erwarteten Audiovolumen vergleichen. Viertens: die Integration; die Benutzerfreundlichkeit der WebSocket-API und die Verfügbarkeit der Mistral-Infrastruktur in der Region bewerten. Fünftens: die Sicherheit; sicherstellen, dass die Datenschutzvorschriften eingehalten werden. Wenn eines dieser Kriterien nicht erfüllt ist, sollten Alternativen oder hybride Lösungen in Betracht gezogen werden.
Die Auswahl beginnt mit der Frage, ob die Anwendung während des Sprechens Text benötigt oder ob ein Transkript nach Abschluss der Aufnahme genügt. Inkrementelle Ausgabe ist besonders dann relevant, wenn Text fortlaufend angezeigt oder im laufenden Dialog verwendet werden soll. Der Bedarf an Echtzeitverarbeitung allein entscheidet jedoch nicht über die Eignung: Auch Sprache, Kosten, regionale Verfügbarkeit und Datenschutz müssen zum geplanten Betrieb passen. Die Tabellenkategorie „geeignet“ ist daher als vorläufige Einordnung anhand des Echtzeitbedarfs zu verstehen, nicht als pauschale Bestätigung für jeden Einsatz.
Bei der Sprachprüfung sollte die unterstützte Sprache für die konkrete Variante bestätigt werden. Die Liste der 45 Sprachen und Dialekte beschreibt den angegebenen Unterstützungsumfang, liefert aber nicht für jede Sprache einen verifizierten Genauigkeitswert. Wo die Qualität entscheidend ist, sollten Teams die Zielsprache mit eigenen repräsentativen Aufnahmen prüfen. Die allgemeine Unterstützungsliste kann eine solche Prüfung nicht ersetzen, und die Ergebnisse für eine Sprache sollten nicht ohne weitere Tests auf andere Sprachen übertragen werden.
Die Minutenkosten lassen sich anhand der erwarteten Dauer des verarbeiteten Audios überschlägig berechnen. Eine solche Schätzung sollte mit dem geplanten Volumen und dem öffentlichen Tarif arbeiten und anschließend gegen die Bedingungen der tatsächlichen Bereitstellung geprüft werden. Wenn sich Nutzung, Region oder Vereinbarung unterscheiden, kann die Rechnung auf Basis des öffentlichen Preises unvollständig sein. Die Kosteneignung ergibt sich daher nicht allein aus einem niedrigen Einzelpreis, sondern aus dem Verhältnis zwischen erwartetem Umfang und den bestätigten Bedingungen.
Die Integrationsprüfung umfasst sowohl die WebSocket-Kommunikation als auch die Verfügbarkeit der Mistral-Infrastruktur in der vorgesehenen Region. Teams sollten nachvollziehen, wie ihre Anwendung Teiltexte empfängt und anzeigt, wie sie Turn-Enden verarbeitet und wie sie Verbindungsfehler behandelt. Eine erfolgreiche Verbindung in einem Test belegt nicht, dass jede spätere Sitzung störungsfrei bleibt. Für den Produktionsbetrieb sind deshalb Fehlerüberwachung und ein Umgang mit Unterbrechungen Teil der technischen Bewertung, nicht bloß optionale Ergänzungen zur API-Nutzung.
Entscheidungstabelle
Kriterien zur Bewertung der Eignung des Modells.
| Kriterium | Schlüsselfrage | Empfohlene Maßnahme |
|---|---|---|
| Echtzeit | Wird inkrementeller Text benötigt? | Wenn ja, ist das Modell geeignet. |
| Sprache | Wird die Sprache unterstützt? | In der Liste der 45 Sprachen überprüfen. |
| Kosten | Ist der Kosten pro Minute tragbar? | Gesamtkosten schätzen. |
| Sicherheit | Gibt es personenbezogene Daten? | Datenschutzkontrollen implementieren. |
Weiter entdecken
Verwendete Quellen
Korrekturen und Transparenz
Wenn du falsche oder veraltete Angaben findest, sende uns die Seite und die zu prüfende Quelle.
Korrektur vorschlagen