Skip to content
DigitalNeuron
Tools & Produkte

Mistral AI stellt Sprachmodelle Voxtral 3 und Voice-Agent-SDK vor

Mistral AI hat Voxtral 3 veröffentlicht, eine Modellfamilie für Sprache-zu-Text und Text-zu-Sprache sowie ein Voice-Agent-SDK mit Unterstützung für über 50 Sprachen für Echtzeit-Sprachagenten.

Von DigitalNeuron Desk2 Min. Lesezeit

Kurze Antwort

Was hat Mistral AI mit Voxtral 3 angekündigt?

Mistral AI hat Voxtral 3 angekündigt, eine Familie von Sprache-zu-Text- und Text-zu-Sprache-Modellen in Kombination mit einem Voice-Agent-SDK. Das Unternehmen gibt an, dass die Lösung Transkription in über 50 Sprachen, ausdrucksstarke Sprachsynthese und Echtzeit-Tool-Calling für Sprachagenten unterstützt, verfügbar über Mistrals EU-gehostete API oder zum Eigenbetrieb.

Das Wichtigste

  • Mistral AI hat Voxtral 3 veröffentlicht, das das Unternehmen als neue Familie von Sprache-zu-Text- und Text-zu-Sprache-Modellen zusammen mit einem Voice-Agent-SDK beschreibt.
  • Das Unternehmen gibt an, dass das Sprache-zu-Text-Modell Voxtral Small Transcribe 3 Transkription in über 50 Sprachen mit Diarisierung, Context Biasing und Sprechpausenerkennung unterstützt.
  • Mistral erklärt, das Text-zu-Sprache-Modell Voxtral Mini TTS 3 unterstütze über 35 Sprachen und mehr als 50 Dialekte und passe Emotion, Tempo und Betonung an den Gesprächskontext an.
  • Das Unternehmen gibt an, die Pro-Voice-Funktion von Voxtral könne die Stimmmerkmale eines Sprechers mithilfe von 30 Minuten Audiomaterial über mehrere Sprachen hinweg reproduzieren.
  • Mistral erklärt, Voxtral 3 sei über die EU-gehostete API oder zum Eigenbetrieb verfügbar, wodurch Organisationen Kontrolle darüber erhalten, wo Audiodaten verarbeitet und ob sie gespeichert werden.

Mistral AI hat Voxtral 3 veröffentlicht, eine neue Familie von Sprache-zu-Text- und Text-zu-Sprache-Modellen in Kombination mit einem Voice-Agent-SDK, wie das Unternehmen mitteilte.

Laut Mistral zielt die Veröffentlichung darauf ab, Sprachagenten zu entwickeln, die zuhören, denken, sprechen und über verbundene Systeme in Echtzeit mehrstufige Aktionen ausführen können. Das Unternehmen erklärt, bestehende Sprachwerkzeuge hätten sich zwar verbessert, doch die Kombination aus präzisem Zuhören, kontextbezogenem Denken, natürlicher Sprache und Tool-Calling in einem zuverlässigen Echtzeitsystem sei weiterhin schwierig gewesen.

Was die Veröffentlichung umfasst

Mistral zufolge besteht Voxtral 3 aus zwei Kernmodellen und einem SDK:

  • Voxtral Small Transcribe 3 — ein Sprache-zu-Text-Modell, das das Unternehmen als Stand der Technik bei der mehrsprachigen Transkription bezeichnet und das Diarisierung (Erkennung, wer wann spricht), Context Biasing (Nutzung vorgegebener Schlüsselphrasen zur Verbesserung der Genauigkeit) und Sprechpausenerkennung unterstützt.
  • Voxtral Mini TTS 3 — ein Text-zu-Sprache-Modell, das laut Unternehmen Stimmen erzeugt, die Emotion, Tempo und Betonung an den Gesprächskontext anpassen, in über 35 Sprachen und mehr als 50 Dialekten.
  • Ein Voice-Agent-SDK — das laut Mistral Zuhören, Denken, Tool-Calling und Sprechen in einer einzigen Echtzeit-Streaming-Pipeline vereint und es Agenten ermöglicht, während laufender Telefon- oder Webgespräche Informationen abzurufen und Aufgaben zu erledigen.

Das Unternehmen beschreibt zudem eine Funktion namens Pro Voice für professionelle Anwendungsfälle, die eigenen Angaben zufolge mithilfe von etwa 30 Minuten Audiomaterial den charakteristischen Klang, die emotionale Bandbreite und den Sprechstil einer Person über mehrere Sprachen hinweg reproduzieren kann.

Sprachabdeckung und Leistungsangaben

Mistral erklärt, das Transkriptionsmodell decke nun 50 Sprachen ab, darunter 24 offizielle EU-Sprachen sowie mehrere ressourcenarme asiatische und indische Sprachen. Das Unternehmen gibt an, die Small-Version erziele Spitzenergebnisse bei Diarisierung und mehrsprachiger Transkription, unter anderem im Englischen, Französischen und Spanischen, und übertreffe dabei Whisper, Scribe v2 und Gemini 3.5 Transcribe. Eine Mini-Variante mit 4 Milliarden Parametern koste laut Mistral 0,0035 US-Dollar pro Minute.

Das Unternehmen beschreibt außerdem ein separates Modell, Voxtral Realtime Transcribe 3, das nach eigenen Angaben Transkriptionen mit einer Latenz von unter 500 Millisekunden in mehr als 35 Sprachen liefert, einschließlich Diarisierung und Context Biasing.

Bei der Sprachgenerierung koste Voxtral Mini TTS 3.0 laut Mistral 13 US-Dollar pro 1 Million Zeichen, was das Unternehmen als günstiger bezeichnet als vergleichbare Angebote von OpenAIs TTS-1, Deepgram, ElevenLabs Flash und Gemini Flash. Mistral erklärt, das Modell interpretiere die semantische Bedeutung des Textkontexts nativ, um Sprache zu erzeugen, und neue Funktionen umfassten Stimmenklonierung anhand von mehr als 30 Minuten Audioproben, die Befolgung individueller Prompt-Anweisungen für Emotion, Tempo und Betonung sowie eine Vokabelbibliothek.

Bereitstellung und Datenverarbeitung

Mistral erklärt, Voxtral 3 sei – wie die übrigen Modelle des Unternehmens – für souveräne Bereitstellung konzipiert. Es ist über Mistrals EU-gehostete API oder zum Eigenbetrieb auf der eigenen Infrastruktur einer Organisation verfügbar, was Unternehmen laut Mistral die Kontrolle darüber gibt, wo Audiodaten verarbeitet werden, wie mit Daten umgegangen wird und ob Gespräche gespeichert werden.

Mistral AI, Voxtral 3: Voice Agent SDK & Speech Models in 50+ Languages, veröffentlicht am 20. Oktober 2026.

Häufige Fragen

Was ist Voxtral 3?
Voxtral 3 ist eine Familie von Sprache-zu-Text- und Text-zu-Sprache-Modellen von Mistral AI, die zusammen mit einem Voice-Agent-SDK veröffentlicht wurde, das laut Unternehmen Zuhören, Denken, Tool-Calling und Sprechen in einer Echtzeit-Pipeline vereint.
Wie viele Sprachen unterstützt Voxtral 3?
Mistral zufolge unterstützt das Transkriptionsmodell über 50 Sprachen, darunter 24 offizielle EU-Sprachen, während das Text-zu-Sprache-Modell über 35 Sprachen und mehr als 50 Dialekte unterstützt.
Wo kann Voxtral 3 bereitgestellt werden?
Das Unternehmen gibt an, Voxtral 3 sei über Mistrals EU-gehostete API oder zum Eigenbetrieb auf der eigenen Infrastruktur einer Organisation verfügbar.
Was ist Pro Voice?
Mistral beschreibt Pro Voice als eine Funktion für professionelle Anwendungsfälle, die mithilfe von etwa 30 Minuten Audiomaterial den charakteristischen Klang, die emotionale Bandbreite und den Sprechstil einer Person über mehrere Sprachen hinweg reproduzieren kann.

Quellen

  1. Voxtral 3: Voice Agent SDK & Speech Models in 50+ Languages — Mistral AI
Schlagwörtermistral-aivoxtralvoice-aispeech-to-texttext-to-speechvoice-agentssovereign-ai

Passend dazu

AWS erweitert die generative Engine von Amazon Polly um 14 neue Stimmen

AWS hat ein allgemein verfügbares Upgrade für die Generative-Engine von Amazon Polly angekündigt und dabei 14 neue Stimmen in 9 Regionen eingeführt, darunter erstmals Unterstützung für Hindi und Finnisch. Damit wächst das Angebot auf insgesamt 57 generative Stimmen in 11 Sprachen und 25 Regionen – für bestehende Nutzer ändern sich weder Code noch Preise.

2 Min. Lesezeit

Mistral stellt Agentic Search für die komplexe Dokumentensuche vor

Mistral hat Agentic Search vorgestellt, eine Retrieval-Schicht, die es KI-Modellen ermöglicht, Informationen in komplexen Dokumenten wiederholt zu durchsuchen, zu prüfen und zu verifizieren. Das Unternehmen gibt an, dass dies die Benchmark-Genauigkeit verbessert und gleichzeitig Token-Nutzung und Latenz reduziert. Es ist über Mistral Search Toolkit und Libraries in Studio und Vibe verfügbar.

2 Min. Lesezeit

AWS stellt Tool für Multi-Turn Reinforcement Learning auf SageMaker AI vor

AWS hat einen technischen Leitfaden veröffentlicht, der Multi-Turn Reinforcement Learning (MTRL) auf Amazon SageMaker AI beschreibt – eine serverlose Pipeline, die Modelle für mehrstufige, agentenbasierte Aufgaben trainiert und dabei Amazon Bedrock AgentCore nutzt, um den Agenten und die Belohnungsfunktion zu hosten und ganze Handlungssequenzen statt einzelner Prompts zu bewerten.

3 Min. Lesezeit