Warum KI-Untertitel sich selbst umschreiben (und andere Geheimnisse der Echtzeit-Sprachübersetzung)
Newey Team

Echtzeit-Sprachübersetzung ist eine Streaming-Pipeline: Spracherkennung (ASR) verwandelt Audio in Text, während Sie sprechen, maschinelle Übersetzung (MT) überträgt diesen Text in die Zielsprache, und — für Sprachausgabe — liest Text-to-Speech ihn laut vor. Moderne Systeme zeigen übersetzte Untertitel etwa 1–4 Sekunden, nachdem die Worte gesprochen wurden — vergleichbar mit der Verzögerung von 2–6 Sekunden bei professionellen menschlichen Simultandolmetschern. Die Genauigkeit bei klarem Audio nähert sich auf Standard-Benchmarks inzwischen der menschlichen Transkription — aber Lärm, Akzente und Fachvokabular können sie drastisch verschlechtern, und der Großteil dieses Verlusts lässt sich mit einem guten Mikrofon und einem eigenen Glossar zurückholen. Hier ist, wie das Ganze unter der Haube funktioniert — mit den tatsächlichen Zahlen.
Die Pipeline: Wie aus Sprache übersetzte Untertitel werden
Die meisten Produktionssysteme sind heute kaskadiert: getrennte Modelle, hintereinandergeschaltet. Wie Google Research es beschreibt, waren Systeme zur Sprachübersetzung „üblicherweise in drei separate Komponenten zerlegt: automatische Spracherkennung, um die Quellsprache als Text zu transkribieren, maschinelle Übersetzung, um den transkribierten Text zu übersetzen, und Text-to-Speech-Synthese". Für Untertitel entfällt die dritte Stufe — der übersetzte Text ist das Produkt.
Die Kaskade hat eine wohlbekannte Schwäche, die Forscher Fehlerfortpflanzung (error propagation) nennen: Verhört sich der Erkenner bei einem Wort, übersetzt der Übersetzer treu das falsche Wort. Die Forschung zur Sprachübersetzung merkt an, kaskadierte Systeme würden „üblicherweise für die Fehlerfortpflanzung zwischen den Modellen für automatische Spracherkennung und maschinelle Übersetzung kritisiert" (Xu et al., 2025). Deshalb zählt die Erkennungsstufe — und alles, was ihr hilft, wie Audioqualität und Vokabelhinweise — in einer Übersetzungspipeline doppelt.
End-to-End-Modelle, die direkt aus dem Audio übersetzen (Googles Translatotron-Linie und die neuesten Voice-to-Voice-Systeme), vermeiden dieses Aufschaukeln. Stand 2026 treibt aber weiterhin der kaskadierte Ansatz die meisten Live-Untertitel-Produkte an, weil sich jede Stufe auf weit mehr Daten trainieren lässt.
Warum Live-Untertitel sich selbst umschreiben
Wer Live-Untertiteln zugesehen hat, kennt es: Wörter erscheinen — und ändern sich dann. Das ist kein Fehler, sondern der Kernmechanismus der Streaming-Erkennung.
Streaming-ASR liefert zwei Arten von Ergebnissen:
- Vorläufige (partielle) Ergebnisse — die bisher beste Vermutung der Engine, markiert als instabil und „änderbar", solange noch Audio eintrifft. Google Clouds Speech-to-Text hängt an jedes Partial sogar einen
stability-Wert, der schätzt, wie wahrscheinlich eine Revision ist. - Endgültige Ergebnisse — festgeschriebener Text, ausgegeben, sobald die Engine genug Kontext hat (typischerweise an einer Pause oder Phrasengrenze). Azures Speech-Dienst macht dieselbe Unterscheidung zwischen
Recognizing- (Zwischen-) undRecognized- (End-)Ereignissen.
Der Grund für die Revisionen ist linguistisch: Spätere Wörter machen frühere eindeutig. „I scream" und „ice cream" klingen identisch, bis mehr Kontext eintrifft. Eine Übersetzungspipeline erbt dieses Verhalten — und fügt eigenes hinzu, denn viele Sprachen platzieren Verben oder Verneinungen an Stellen, die den Übersetzer zum Warten oder Umschreiben zwingen. Gute Untertitelsysteme justieren genau diesen Zielkonflikt zwischen Text schnell zeigen und Text zeigen, der sich nicht mehr ändert.
Wie schnell ist „Echtzeit"?
Zahlen aus Anbieter-Dokumentationen und Engineering-Leitfäden, Stand 2026:
Komponentenwerte aus Engineering-Leitfäden der Branche (Fora Soft, Translated); reale Gesamtwerte summieren sich unter ungünstigen Bedingungen auf 2–6 Sekunden, wobei unter ~3 Sekunden für Live-Events allgemein als akzeptabel gilt.
Und hier der Kontext, der die meisten überrascht: Menschliche Simultandolmetscher haben dieselbe Verzögerung. Das akademische Maß ist der Ear-Voice-Span — die Zeit zwischen Hören und Sprechen — und Studien verorten ihn zwischen 2 und 6 Sekunden, mit berichteten Mittelwerten von etwa 2,7 bis 4,7 Sekunden (UCL-Forschungsüberblick). Verzögerungen jenseits von ~4 Sekunden gehen auch bei Menschen mit Genauigkeitsverlust einher. Eine gut abgestimmte KI-Untertitel-Pipeline liegt mitten im Latenzbereich menschlicher Dolmetscher.
Wie genau ist Spracherkennung wirklich?
Die Standardmetrik ist die Wortfehlerrate (word error rate, WER): Ersetzungen + Auslassungen + Einfügungen, geteilt durch die Zahl der tatsächlich gesprochenen Wörter. WER 10 % heißt: Eines von zehn Wörtern ist in irgendeiner Form falsch.
Die ehrliche Antwort auf „Wie genau?" lautet: Es hängt enorm von den Bedingungen ab.
- Saubere, klare Sprache: OpenAIs Whisper-Paper berichtet ~2,5–2,7 % WER auf dem Clean-Benchmark von LibriSpeech — grob menschliches Niveau auf diesem Benchmark — merkt aber an, dass Modelle über vielfältigere reale Datensätze hinweg noch etwa doppelt so viele Fehler wie Menschen machen.
- Telefongespräche: Microsofts berühmtes „Human Parity"-Ergebnis erreichte 2017 auf dem Switchboard-Benchmark 5,1 % WER — mit Microsofts eigenem Vorbehalt, dass laute Umgebungen, entfernte Mikrofone und akzentgefärbte Sprache ungelöst blieben.
- Entfernte Mikrofone, überlappende Sprecher: Die CHiME-6-Challenge (Dinnerparty-Aufnahmen über Raummikrofone) ist der ernüchternde Datenpunkt — selbst das Gewinnersystem lag noch bei ~40 % WER, die Baseline bei ~51 %.
- Akzente und Dialekte: Eine PNAS-Studie über fünf große kommerzielle ASR-Systeme fand eine durchschnittliche WER von 0,35 für schwarze amerikanische Sprecher gegenüber 0,19 für weiße Sprecher — eine Lücke, die auf die Abdeckung der Trainingsdaten zurückgeführt wurde. Nicht-muttersprachliche Akzente unterliegen derselben Mechanik.
- Gemischtsprachige Rede: Code-Switching (englische Begriffe ins Koreanische, Hindi usw. einstreuen) bleibt ein großer Schwachpunkt — Anbieter berichten von 30–50 % relativer WER-Zunahme gegenüber einsprachiger Rede.
Die Lehre daraus ist nicht „KI ist zu 97 % genau" oder „KI ist unbrauchbar" — sondern dass dasselbe System in einem ruhigen Raum mit gutem Mikrofon nahezu perfekt und in einem halligen Saal mit Durcheinandergerede stark verschlechtert sein kann.
Die Übersetzungsqualität kommt obendrauf
Die MT-Stufe hat ihre eigenen Qualitätsmaße — N-Gramm-Überlappungswerte wie BLEU und neuronale Metriken wie COMET, die besser mit menschlichem Urteil korrelieren. Für Live-Untertitel ist die praktische Regel aber einfacher: Die Übersetzungsqualität ist durch die Erkennungsqualität gedeckelt. Eine perfekt übersetzte Fehlerkennung bleibt falsch, und ein verstümmelter Produktname wird in jeder Zielsprache gleichzeitig verstümmelt.
Was die Genauigkeit tatsächlich verbessert
In grober Reihenfolge der Wirkung:
- Mikrofon und Abstand. Die Lücke zwischen Benchmark-WER (~3–5 %) und Dinnerparty-WER (~40 %) ist größtenteils Akustik. Ein Headset oder ein Mikrofon in Armreichweite schlägt jedes Modell-Upgrade.
- Einer spricht zur Zeit. Überlappende Sprache ist das härteste offene Problem der ASR — Meeting-Disziplin ist ein Genauigkeits-Feature.
- Eigenes Vokabular / Glossar. Jede große Engine unterstützt es, die Erkennung auf erwartete Begriffe auszurichten: Googles Modellanpassung nutzt Phrasensets, um „Eigennamen oder domänenspezifische Wörter" zu stärken, und Azures Phrasenlisten zeigen das kanonische Beispiel: „Contoso bank" wird als „can't do so bank" erkannt, bis der Begriff registriert ist. Dem System Ihre Produktnamen, Teilnehmernamen und Branchenbegriffe vor dem Meeting mitzugeben, ist der wirksamste Software-Hebel überhaupt.
- Kontext. Dem System zu sagen, worum es in der Sitzung geht (eine Keynote über Onkologie vs. eine Sprint-Retro), hilft Erkennung und Übersetzung, bei mehrdeutigen Wörtern die richtige Lesart zu wählen.
- Sprechergewohnheiten. Moderates Tempo und vollständige Sätze helfen — dieselben Dinge, die menschlichen Dolmetschern helfen, die zu zweit arbeiten und alle 20–30 Minuten rotieren, gerade weil diese Arbeit kognitiv brutal ist (AIIC).
Helfen Live-Untertitel wirklich beim Folgen?
Ja — und nicht nur, wenn übersetzt wird. Ein Forschungsüberblick in Policy Insights from the Behavioral and Brain Sciences stellte fest, dass „mehr als 100 empirische Studien dokumentieren, dass die Untertitelung eines Videos das Verständnis, die Aufmerksamkeit und die Erinnerung an das Video verbessert" — mit besonders starkem Nutzen für Menschen, die in ihrer Nicht-Muttersprache zuschauen. Nimmt man die Barrierefreiheits-Dimension hinzu — die WHO zählt 1,5 Milliarden Menschen mit einem gewissen Grad an Hörverlust, mit einer Prognose von 2,5 Milliarden bis 2050 —, sind Untertitel für internationale Meetings kein Nice-to-have mehr.
Was das in der Praxis bedeutet
Wenn Sie Live-Übersetzung für Meetings oder Events evaluieren, verdichtet sich dieser Artikel auf vier Fragen: Wie nah ist das Mikrofon am Sprecher? Können Sie Ihr Vokabular vorab laden? Liegt die Latenz im Bereich menschlicher Dolmetscher (2–6 s)? Und kann jeder Zuhörer die Sprache bekommen, die er braucht?
Um diesen letzten Punkt herum haben wir Newey gebaut: Es streamt Ihr Meeting- oder Event-Audio direkt aus dem Browser in eine Erkennungs-plus-Übersetzungs-Pipeline, zeigt Untertitel in einem schwebenden Overlay innerhalb der oben genannten Latenzbereiche, unterstützt eigene Glossare und Sitzungskontext gegen das Vokabelproblem und übersetzt in 60 Sprachen — bis zu 3 gleichzeitig angezeigt, mit einer QR-Option, damit jedes Publikumsmitglied die eigene Sprache auf dem Handy liest. Während der Beta kostenlos — Sie können diese Genauigkeitsaussagen also an Ihren eigenen Meetings überprüfen.
Die Organisatoren-Sicht auf alle Optionen — menschliche Dolmetscher, Bordmittel der Plattformen und KI-Untertitel — finden Sie in So führen Sie ein mehrsprachiges Meeting.
FAQ
Ist KI-Sprachübersetzung so genau wie ein menschlicher Dolmetscher?
Andere Fehlerarten. Bei klarem Audio mit gängigem Vokabular nähert sich moderne ASR auf Standard-Benchmarks der menschlichen Transkriptionsgenauigkeit; in lauten Räumen, bei starken Akzenten oder gemischtsprachiger Rede gewinnen Menschen weiterhin deutlich. Menschen verdichten und priorisieren Bedeutung unter Druck, während KI alles wörtlich übersetzt — auch die Teile, die ein Mensch klugerweise weglassen würde.
Warum erscheinen Untertitel und ändern sich dann?
Streaming-Erkenner geben sofort vorläufige „partielle" Ergebnisse aus und ersetzen sie durch „endgültige", sobald genug Kontext eintrifft (sowohl Google als auch Azure dokumentieren dieses zweiphasige Verhalten). Spätere Wörter ändern tatsächlich, was frühere Laute bedeuteten.
Mit welcher Latenz sollte ich bei live übersetzten Untertiteln rechnen?
Etwa 1–4 Sekunden unter guten Bedingungen. Zur Einordnung: Professionelle menschliche Simultandolmetscher arbeiten mit einem Ear-Voice-Span von 2–6 Sekunden.
Was ist WER?
Die Wortfehlerrate (word error rate) — der Anteil der Wörter, die der Erkenner falsch erfasst (ersetzt, ausgelassen oder eingefügt), bezogen auf das tatsächlich Gesagte. Sie ist die Standard-Genauigkeitsmetrik der Spracherkennung.
Ist Hintergrundlärm wirklich so entscheidend?
Er ist der größte Einzelfaktor. Dieselbe Modellklasse, die auf sauberen Benchmarks ~3–5 % WER erreicht, kam in der CHiME-6-Challenge mit entfernten Mikrofonen auf ~40 % WER. Beheben Sie das Mikrofonproblem vor allem anderen.
Wie verhindere ich, dass das System unsere Produktnamen verhunzt?
Nutzen Sie ein Glossar bzw. eine Custom-Vocabulary-Funktion. Fachbegriffe vor der Sitzung zu registrieren, ist genau der Zweck der Phrase-Biasing-APIs der Sprach-Engines — und nach der Audioqualität der wirksamste Hebel.
Weiterlesen: So führen Sie ein mehrsprachiges Meeting · Übersetzte Untertitel in Zoom · Übersetzte Untertitel in Google Meet