Wir stellen Eleven v4 vorLernen Sie Eleven v4 kennen, unser bisher ausdrucksstärkstes Modell.

Zum Inhalt springen

Scribe v3 Live Medical hilft Conversational Agents, klinische Details korrekt zu erfassen

Verfasst von
John Durovsik
Veröffentlicht

AnhörenArtikel anhören

Ein Voice Agent handelt anhand dessen, was er während eines Live-Anrufs hört. Wenn ein Patient sagt, dass er Sitagliptin gegen Diabetes einnimmt, kann der Agent es zur Medikamentenliste hinzufügen, damit der Arzt sie prüft. Medikamentennamen sind jedoch leicht falsch zu verstehen. In unseren Tests sahen wir, wie ein Speech-Modell Sitagliptin als Citalopram transkribierte – ein Antidepressivum. Für viele Menschen sind diese Anrufe der erste Schritt, ihr Behandlungsteam zu erreichen. Ein Agent kann nur helfen, wenn er sie korrekt versteht.

Heute veröffentlicht ElevenLabs Scribe v3 Live Medical, das medizinische Transkription für Live-Anrufe ermöglicht. Es basiert auf Scribe v3 Live, unserem neuesten Echtzeitmodell für Speech to Text, und ist für klinische Sprache optimiert. Es ist jetzt in ElevenAgents verfügbar.

Warum Live-Anrufe medizinische Transkription benötigen

ElevenLabs bietet bereits medizinische Transkription für aufgezeichnete Audiodateien, etwa Diktate und Gesprächsaufzeichnungen. Viele Anwendungen von Gesundheitsteams laufen jedoch in Echtzeit: von Terminvereinbarungen und medizinischen Informationshotlines bis zu telefonischen Anspruchsprüfungen und der Nachverfolgung von Erstattungsansprüchen. Diese Anrufe können nicht warten, bis eine Aufnahme endet. 

Medikamentennamen und Dosierungen kommen in der Alltagssprache selten vor. Daher sind es genau die Wörter, die ein allgemeines Echtzeitmodell eher falsch erkennt. Scribe v3 Live Medical ist unsere erste medizinische Transkription für Agenten. Es überträgt den klinischen Fokus von Scribe v2 Medical auf Echtzeitgespräche. In unseren Tests mit PriMock57, einem öffentlichen Datensatz simulierter Live-Arztbesuche, machte Scribe v3 Live Medical weniger Fehler als jedes andere medizinische Modell, das wir bewertet haben.

Anrufe, bei denen klinische Details zählen

Scribe v3 Live Medical ist für Anrufe von Patienten, Versicherten und Leistungserbringern konzipiert, bei denen klinische Details wichtig sind – etwa ein Medikament bei der Aufnahme, ein Eingriff in einer Vorabgenehmigung oder ein Symptom bei einem Nachsorgeanruf. Viele Healthcare-Agents bearbeiten auch Anrufe ganz ohne klinische Details, etwa zur Terminverschiebung oder zu Sprechzeiten. Scribe v3 Live Medical verbessert die Genauigkeit bei klinischen Details und bewahrt sie bei Alltagssprache, sodass Teams es für jeden Anruf einsetzen können.

Tools für klinische Gespräche

Bis zu 10.000 benutzerdefinierte Begriffe laden

Gesundheitsteams können bis zu 10.000 eigene Begriffe hinzufügen. Scribe v3 Live Medical nutzt die Liste nur, wenn ein Anrufender offenbar einen davon nennt. Das reicht aus, damit ein regionales Gesundheitssystem alle Namen von Leistungserbringern und Kliniken an seinen Standorten lädt oder ein Pharmaunternehmen sein gesamtes Portfolio unter Marken- und Wirkstoffnamen lädt. Mit einer geladenen Liste benutzerdefinierter Begriffe machte Scribe v3 Live Medical in unseren Tests bei medizinischen Begriffen bis zu 48 % weniger Fehler.

Warten, bis Anrufende fertig sind

Anrufende lesen eine Versichertennummer oder ein Geburtsdatum oft abschnittsweise vor und pausieren zwischen Zifferngruppen, während sie diese auf einer Karte suchen. Ein Agent, der jede Pause als Ende eines Sprecherturns wertet, fällt mitten in einer Nummer ins Wort, und der Anrufende muss von vorn beginnen. Scribe v3 Live Medical erkennt, wenn eine Nummer noch nicht vollständig ist. Der Agent wartet daher auf den Rest, bevor er antwortet.

Patienten sprachübergreifend begleiten

Patienten und Angehörige wechseln möglicherweise mitten im Anruf die Sprache, um etwa ein Symptom leichter in ihrer Muttersprache zu beschreiben. Scribe v3 Live Medical unterstützt mehr als 90 Sprachen und folgt diesen Wechseln, sodass Sprache in einer zweiten Sprache transkribiert statt ausgelassen wird.

Wie wir Scribe v3 Live Medical evaluiert haben

Wir haben Scribe v3 Live Medical anhand derselben Aufnahmen gegen Echtzeitmodelle für Speech to Text führender Anbieter getestet, darunter spezialisierte medizinische Modelle und Allzweckmodelle. Wir nutzten zwei öffentliche Benchmarks mit Arzt-Patienten-Gesprächen, verglichen Scribe v3 Live Medical mit Scribe v3 Live bei medizinischer und alltäglicher Sprache und testeten medizinische Begriffe auf Englisch, Französisch und Deutsch. Die Ergebnisse sind, sofern nicht anders angegeben, auf Englisch. 

Wir geben die Wortfehlerrate (WER) an, also den Anteil falsch transkribierter Wörter, sowie die semantische WER, die nur Fehler zählt, welche die Bedeutung verändern. Die semantische WER wertet „20 mg“ und „zwanzig Milligramm“ als Übereinstimmung, daher fallen ihre Werte niedriger aus als die WER. 

Hinweis: Diese Ergebnisse stammen aus internen Tests von ElevenLabs mit ausgewählten Anbietern im Echtzeitmodus und jeweils der besten verfügbaren Modellkonfiguration. Sie umfassen nicht alle verfügbaren Modelle.

Hausärztliche Konsultationen (PriMock57)

PriMock57 umfasst 57 simulierte Live-Konsultationen in der hausärztlichen Versorgung, jeweils etwa 9 Minuten lang, zwischen medizinischem Personal und Schauspielern in der Rolle von Patienten. Die Gespräche waren auf beiden Seiten nicht geskriptet. Die Schauspieler arbeiteten mit Fallkarten zu Symptomen, Krankengeschichte und aktuellen Medikamenten, und die Kliniker führten jede Konsultation wie eine reale durch. Die Anrufe liefen über Telemedizinsoftware, wobei die Kliniker Laptops und die Patienten Mobiltelefone nutzten, in einer Büroumgebung mit Hintergrundgeräuschen.

Wir nutzten diesen Benchmark, weil er die Faktoren enthält, die Patientenanrufe schwer transkribierbar machen: ungeskriptete Gespräche mit gegenseitigem Austausch, Telefonaudio mit Hintergrundgeräuschen und viele klinische Details. Scribe v3 Live Medical hatte die niedrigste WER der von uns getesteten medizinischen Modelle (12,8 %) und machte 17 % weniger Fehler als das nächstbeste Modell.

Scribe v3 Live Medical has the lowest WER at 12.8%, 17% below the next medical model.

Patienteninterviews (Fareez OSCE)

Fareez OSCE umfasst 272 aufgezeichnete Patienteninterviews in dem Format, das medizinische Hochschulen zur Prüfung klinischer Fähigkeiten nutzen: die Objective Structured Clinical Examination (OSCE). In jedem Interview befragt ein Assistenzarzt oder fortgeschrittener Medizinstudent eine Person in der Rolle eines Patienten zu ihren Symptomen und ihrer Vorgeschichte. Da ein anderes Team die Aufnahmen in einem anderen Land erstellt hat, zeigt der Datensatz, ob die Ergebnisse auch bei neuen Sprechern, Aufnahmeumgebungen und Bedingungen bestehen. Scribe v3 Live Medical hatte die niedrigste semantische WER der von uns getesteten medizinischen Modelle (0,6 %).

Fareez OSCE benchmark results

Vergleich mit Scribe v3 Live

Eka Medical ASR enthält mehr als 3.600 englische Aufnahmen von Ärzten und Medizinstudenten mit Fokus auf medizinische Begriffe und Markennamen von Medikamenten. Scribe v3 Live Medical machte bei Eka Medical ASR 4,7 % weniger Fehler als Scribe v3 Live (11 % gegenüber 11,54 % semantische WER).

Modell

Eka Medical ASR (semantische WER)

Scribe v3 Live Medical

11%

Scribe v3 Live

11.54%

Alltagssprache (Common Voice und FLEURS)

Common Voice ist Mozillas Sammlung von Sätzen, die von Freiwilligen vorgelesen wurden. FLEURS ist Googles Sammlung kurzer, nicht klinischer Sätze, die in mehr als 100 Sprachen vorgelesen wurden. Wir haben beide anhand ihrer englischen Datensätze bewertet, um sicherzustellen, dass Teams mit Scribe v3 Live Medical bei Alltagssprache keine Genauigkeit einbüßen. Selbst ein Satz, in dem ein Medikament genannt wird, besteht größtenteils aus alltäglichen Wörtern. Ein medizinisches Modell muss also beides korrekt verstehen. 

Scribe v3 Live Medical erzielt bei beiden etwa die gleiche Leistung wie Scribe v3 Live.

Scribe v3 Live Medical is nearly as accurate as Scribe v3 Live on Common Voice and FLEURS

Medizinische Genauigkeit über Sprachen hinweg (MED-Term)

Viele Gesundheitsteams betreuen Patienten in mehr als einer Sprache. MED-Term, ein öffentlicher Benchmark von Corti, ist eine Sammlung gesprochener klinischer Fallbeschreibungen auf Englisch, Französisch und Deutsch, die jeweils auf seltenen und spezialisierten medizinischen Begriffen basieren. Wir nutzten ihn, um zu prüfen, wie Scribe v3 Live Medical mit klinischem Vokabular außerhalb des Englischen umgeht. Seine semantische WER betrug 2,24 % auf Englisch, 2,81 % auf Deutsch und 3,24 % auf Französisch. 

Sprache

Semantische WER (MED-Term)

Englisch

2.24%

Deutsch

2.81%

Französisch

3.24%

Niedrige Latenz bei Live-Anrufen

Bei einem Live-Anruf kann ein Agent erst antworten, wenn ihm das Transkript vorliegt. Jede Verzögerung bei der Transkription wird somit zu einer Pause, die Anrufende hören. Scribe v3 Live transkribiert Sprache in etwa 150 Millisekunden. In Tests erreicht Scribe v3 Live Medical dieselbe Latenz, sodass sein klinischer Fokus keine spürbare Verzögerung hinzufügt.

Was Gesundheitsteams beobachten

Teams entwickeln bereits Agents mit Scribe v3 Live Medical.

„Das Interaktionserlebnis mit Eleven v4 Turbo und Scribe v3 Live Medical ist hervorragend“, sagt Idin Jafari, Director, Digital Strategy & Innovation bei Pfizer. „Der Agent klingt realistisch und erkennt die Marken- und Generikanamen, die in unseren Gesprächen vorkommen, genauer.“

Bei Patientenanrufen zeigt sich diese Genauigkeit auch in dem, was Betreuungsteams nach dem Anruf prüfen.

„ElevenLabs setzt die Messlatte immer höher, und das ermöglicht Vintage Labs, schneller voranzukommen. Unsere VIA-Plattform führt Anrufe vor und nach Eingriffen für große universitäre Gesundheitssysteme durch. Mit Scribe v3 Live Medical versteht sie Patienten besser: ihre Medikamente, ihre Eingriffe, die Namen ihrer Ärzte“, sagt Shantanu Ghorai, Gründer & COO von Vintage Labs AI. „Die Sprecherturnerkennung wartet, bis Patienten ihr Geburtsdatum vollständig genannt haben, bevor sie antwortet. Der mehrsprachige Modus folgt mit, wenn Anrufende zu Spanisch wechseln. Pflegekräfte können der Anrufzusammenfassung jetzt vertrauen, ohne die Aufnahme erneut abzuspielen.“

Was weniger Fehler für Gesundheitsteams bedeuten

Fehlerraten lassen sich anhand eines echten Anrufs besser beurteilen. Bei einem zehnminütigen Aufnahmegespräch werden zwischen dem Anrufenden und dem Agent etwa 1.500 Wörter gesprochen. Bei den oben genannten Fehlerraten von PriMock57 würde Scribe v3 Live Medical etwa 40 dieser Wörter mehr korrekt erfassen als das nächstbeste von uns getestete medizinische Modell. Für ein Team mit 1.000 Anrufen täglich sind das täglich etwa 40.000 zusätzliche korrekt transkribierte Wörter. Nicht jedes Wort hat dieselbe Bedeutung. Ein ausgelassenes „ähm“ ist harmlos. Ein falsch verstandenes Medikament führt dazu, dass auf einem Antrag zur Medikamentennachfüllung das falsche Arzneimittel steht, und eine falsche Ziffer in einer Versichertennummer verzögert eine Anspruchsprüfung. Beides kann zu einem Rückruf, einer Weiterleitung an Mitarbeitende oder der Bitte an einen Patienten führen, sich zu wiederholen.

Schutz von Gesundheitsinformationen

Healthcare-Agents hören in vielen Anrufen geschützte Gesundheitsinformationen (PHI), darunter Namen, Geburtsdaten, Versichertennummern, Medikamente und Symptome. Scribe v3 Live Medical ist für Unternehmenskunden HIPAA-geeignet, wenn eine Vereinbarung mit Geschäftspartnern (BAA) besteht und Zero Retention Mode aktiviert ist.

Scribe v3 Live Medical läuft auf ElevenAgents, das durch unsere Compliance-Programme abgedeckt ist, darunter SOC 2 Type II, ISO 27001 und PCI DSS Level 1. Patientendaten werden standardmäßig in den USA gespeichert. Unternehmensteams, die eine Speicherung außerhalb der USA benötigen, können isolierte Umgebungen in der EU, Indien oder Singapur nutzen.

Erste Schritte

Scribe v3 Live Medical ist ab heute in ElevenAgents verfügbar. 

Gehen Sie zu Einstellungen > Automatic Speech Recognition und wählen Sie es in der Modellauswahl aus. 

Verfasst von

John is on the ElevenAgents growth team, with a focus on the healthcare industry.

Ähnliche Artikel

Erstellen Sie mit hochwertiger KI-Audio