Scribe v3 Live Medical aiuta gli agenti conversazionali a gestire correttamente i dettagli clinici
- Scritto da
- John Durovsik
- Pubblicato
AscoltaAscolta questo articolo
Un agente vocale agisce in base a ciò che sente durante una chiamata in tempo reale. Quando un paziente dice di assumere sitagliptin per il diabete, l'agente può aggiungerlo all'elenco dei farmaci affinché il medico lo esamini. Ma è facile capire male i nomi dei farmaci. Nei nostri test, abbiamo visto un modello vocale trascrivere sitagliptin come citalopram, un antidepressivo. Per molte persone, queste chiamate sono il primo passo per entrare in contatto con il proprio team di assistenza, e un agente può aiutarle solo se le capisce correttamente.
Oggi ElevenLabs presenta Scribe v3 Live Medical, che porta la trascrizione medica nelle chiamate in tempo reale. Si basa su Scribe v3 Live, il nostro più recente modello di Speech to Text in tempo reale, ed è ottimizzato per il linguaggio clinico. È già disponibile in ElevenAgents.
Perché le chiamate in tempo reale richiedono la trascrizione medica
ElevenLabs offre già la trascrizione medica per l'audio registrato, come dettature e registrazioni delle visite. Tuttavia, gran parte di ciò che sviluppano i team sanitari funziona in tempo reale: dalla pianificazione degli appuntamenti e dalle linee di informazioni mediche alle verifiche dell'idoneità telefoniche e ai follow-up delle richieste di rimborso. Queste chiamate non possono aspettare che una registrazione finisca.
I nomi e le dosi dei farmaci compaiono raramente nel parlato quotidiano, quindi sono le parole che un modello generico in tempo reale ha maggiori probabilità di sbagliare. Scribe v3 Live Medical è la nostra prima trascrizione medica progettata per gli agenti e porta l'attenzione clinica di Scribe v2 Medical nelle conversazioni in tempo reale. Nei nostri test su PriMock57, un set pubblico di simulazioni di visite mediche in tempo reale, Scribe v3 Live Medical ha commesso meno errori di qualsiasi altro modello medico che abbiamo valutato.
Chiamate in cui i dettagli clinici sono importanti
Scribe v3 Live Medical è progettato per le chiamate con pazienti, iscritti e operatori sanitari in cui i dettagli sono clinici, come un farmaco durante l'accettazione, una procedura in una richiesta di autorizzazione preventiva o un sintomo in una chiamata di follow-up. Molti agenti sanitari gestiscono anche chiamate senza alcun dettaglio clinico, come riprogrammare un appuntamento o chiedere gli orari di apertura. Scribe v3 Live Medical migliora l'accuratezza sui dettagli clinici e mantiene la stessa accuratezza nel parlato quotidiano, così i team possono usarlo per ogni chiamata.
Strumenti per le conversazioni cliniche
Carica fino a 10.000 termini personalizzati
I team sanitari possono aggiungere fino a 10.000 termini propri e Scribe v3 Live Medical usa l'elenco quando chi chiama sembra pronunciarne uno. È sufficiente perché un sistema sanitario regionale carichi il nome di ogni operatore e clinica delle proprie sedi, o perché un'azienda farmaceutica carichi il proprio portafoglio completo per nome commerciale e generico. Nei nostri test, con un elenco di termini personalizzati caricato, Scribe v3 Live Medical ha commesso fino al 48% di errori in meno sui termini medici.
Attendi che chi chiama finisca
Chi chiama spesso legge un ID dell'iscritto o una data di nascita a pezzi, facendo pause tra gruppi di cifre mentre li cerca su una tessera. Un agente che interpreta ogni pausa come la fine di un turno interviene a metà numero e chi chiama deve ricominciare. Scribe v3 Live Medical riconosce quando un numero non è ancora completo, quindi l'agente attende il resto prima di rispondere.
Segui i pazienti tra le lingue
I pazienti e chi li assiste possono cambiare lingua a metà chiamata, per esempio per descrivere più facilmente un sintomo nella propria lingua madre. Scribe v3 Live Medical supporta più di 90 lingue e segue questi cambi di lingua, così il parlato in una seconda lingua viene trascritto anziché omesso.
Cosa riscontrano i team sanitari
I team stanno già creando agenti con Scribe v3 Live Medical.
«L'esperienza di interazione con Eleven v4 Turbo e Scribe v3 Live Medical è fenomenale», afferma Idin Jafari, Director, Digital Strategy & Innovation di Pfizer. «L'agente suona realistico ed è più accurato sui nomi commerciali e generici che emergono nelle nostre conversazioni.»
Nelle chiamate con i pazienti, questa accuratezza si riflette anche su ciò che i team di assistenza esaminano dopo la chiamata.
«ElevenLabs continua ad alzare l'asticella e questo consente a Vintage Labs di muoversi più velocemente. La nostra piattaforma VIA effettua chiamate prima e dopo le procedure per grandi sistemi sanitari accademici. Con Scribe v3 Live Medical, comprende meglio i pazienti: i loro farmaci, le procedure, i nomi dei loro medici», afferma Shantanu Ghorai, Founder & COO di Vintage Labs AI. «Il rilevamento dei turni attende che i pazienti finiscano di comunicare la data di nascita prima di rispondere e la modalità multilingue tiene il passo quando chi chiama passa allo spagnolo. Ora gli infermieri possono fidarsi del riepilogo della chiamata senza riascoltare la registrazione.»
Come abbiamo valutato Scribe v3 Live Medical
Abbiamo testato Scribe v3 Live Medical rispetto a modelli di Speech to Text in tempo reale di fornitori leader, inclusi modelli medici specializzati e modelli per uso generale, tutti sulle stesse registrazioni. Abbiamo utilizzato due benchmark pubblici di conversazioni tra medici e pazienti, confrontato Scribe v3 Live Medical con Scribe v3 Live sul parlato medico e quotidiano e testato termini medici in inglese, francese e tedesco. Salvo diversa indicazione, i risultati sono in inglese.
Riportiamo il tasso di errore delle parole (WER), ovvero la quota di parole trascritte in modo errato, e il WER semantico, che conta solo gli errori che modificano il significato. Il WER semantico considera «20 mg» e «venti milligrammi» come equivalenti, quindi i suoi punteggi sono inferiori al WER.
Nota: questi risultati provengono dai test interni di ElevenLabs su fornitori selezionati in modalità tempo reale, con ciascun modello nella migliore configurazione disponibile. Non includono tutti i modelli disponibili.
Consulti di assistenza primaria (PriMock57)
PriMock57 include 57 simulazioni di consulti di assistenza primaria in tempo reale, di circa 9 minuti ciascuna, tra medici e attori che interpretano pazienti. Le conversazioni non erano sceneggiate per nessuna delle due parti. Gli attori lavoravano con schede dei casi che illustravano sintomi, anamnesi e farmaci in uso, mentre i medici conducevano ogni consulto come se fosse reale. Le chiamate avvenivano tramite software di telemedicina, con i medici su laptop e i pazienti su telefoni cellulari, in un ambiente d'ufficio con rumore di fondo.
Abbiamo utilizzato questo benchmark perché presenta gli elementi che rendono difficili da trascrivere le chiamate dei pazienti: conversazioni spontanee con scambi continui, audio telefonico con rumore di fondo e un'elevata densità di dettagli clinici. Scribe v3 Live Medical ha ottenuto il WER più basso tra i modelli medici che abbiamo testato (12,8%), con il 17% di errori in meno rispetto al modello successivo.

Interviste ai pazienti (Fareez OSCE)
Fareez OSCE comprende 272 interviste registrate a pazienti nel formato che le facoltà di medicina usano per valutare le competenze cliniche, l'Objective Structured Clinical Examination (OSCE). In ciascuna, un medico specializzando o uno studente di medicina senior chiede a una persona che interpreta il paziente informazioni sui sintomi e sull'anamnesi. Poiché è stato registrato da un team diverso in un altro Paese, il set mostra se i risultati si mantengono con nuovi parlanti, configurazioni di registrazione e condizioni diverse. Scribe v3 Live Medical ha ottenuto il WER semantico più basso tra i modelli medici che abbiamo testato (0,6%).

Confronto con Scribe v3 Live
Eka Medical ASR contiene più di 3.600 registrazioni in inglese di medici e studenti di medicina, incentrate su termini medici e nomi commerciali di farmaci. Scribe v3 Live Medical ha commesso il 4,7% di errori in meno su Eka Medical ASR rispetto a Scribe v3 Live (11% contro 11,54% di WER semantico).
Modello
Eka Medical ASR (WER semantico)
Scribe v3 Live Medical
11%
Scribe v3 Live
11.54%
Parlato quotidiano (Common Voice e FLEURS)
Common Voice è il set di Mozilla di frasi lette ad alta voce da volontari, mentre FLEURS è il set di Google di brevi frasi non cliniche lette in più di 100 lingue. Abbiamo calcolato i punteggi di entrambi sui set in inglese per assicurarci che i team che usano Scribe v3 Live Medical non rinuncino all'accuratezza nel parlato quotidiano. Anche una frase che cita un farmaco è composta per lo più da parole di uso quotidiano, quindi un modello medico deve riconoscere correttamente entrambe.
Scribe v3 Live Medical offre prestazioni pressoché identiche a Scribe v3 Live in entrambi i casi.

Accuratezza medica in tutte le lingue (MED-Term)
Molti team sanitari assistono pazienti in più di una lingua. MED-Term, un benchmark pubblico di Corti, è un set di descrizioni parlate di casi clinici in inglese, francese e tedesco, ciascuna costruita attorno a termini medici rari e specialistici. Lo abbiamo utilizzato per verificare come Scribe v3 Live Medical gestisce il vocabolario clinico oltre l'inglese. Il suo WER semantico è stato del 2,24% in inglese, del 2,81% in tedesco e del 3,24% in francese.
Lingua
WER semantico (MED-Term)
Inglese
2.24%
Tedesco
2.81%
Francese
3.24%
Bassa latenza nelle chiamate in tempo reale
In una chiamata in tempo reale, un agente non può rispondere finché non ha la trascrizione, quindi qualsiasi ritardo nella trascrizione diventa una pausa che chi chiama percepisce. Scribe v3 Live trascrive il parlato in circa 150 millisecondi e, nei test, Scribe v3 Live Medical eguaglia questa latenza, quindi la sua attenzione clinica non aggiunge ritardi percepibili.
Cosa significano meno errori per i team sanitari
I tassi di errore sono più facili da valutare in una chiamata reale. Una chiamata di accettazione di 10 minuti comprende circa 1.500 parole tra chi chiama e l'agente. Ai tassi di errore PriMock57 indicati sopra, Scribe v3 Live Medical riconoscerebbe correttamente circa 40 parole in più rispetto al miglior modello medico successivo che abbiamo testato. Per un team che gestisce 1.000 chiamate al giorno, sono circa 40.000 parole in più trascritte correttamente ogni giorno. Non tutte le parole hanno lo stesso peso. Omettere un «ehm» è innocuo. Capire male un farmaco inserisce il medicinale sbagliato in una richiesta di rinnovo e una cifra errata in un ID dell'iscritto blocca una verifica dell'idoneità. Entrambe le situazioni possono tradursi in una richiamata, un trasferimento al personale o nella richiesta al paziente di ripetere le informazioni.
Protezione delle informazioni sanitarie
Gli agenti sanitari ascoltano informazioni sanitarie protette (PHI) in molte chiamate, inclusi nomi, date di nascita, ID degli iscritti, farmaci e sintomi. Scribe v3 Live Medical è idoneo HIPAA per i clienti enterprise che dispongono di un business associate agreement (BAA) e hanno attivato Zero Retention Mode.
Scribe v3 Live Medical funziona su ElevenAgents, coperto dai nostri programmi di conformità normativa, tra cui SOC 2 Type II, ISO 27001 e PCI DSS Level 1. Per impostazione predefinita, i dati dei pazienti vengono archiviati negli Stati Uniti. I team enterprise che devono archiviarli fuori dagli Stati Uniti possono utilizzare ambienti isolati nell'UE, in India o a Singapore.
Per iniziare
Scribe v3 Live Medical è disponibile da oggi in ElevenAgents.
Vai a Impostazioni > Riconoscimento vocale automatico e selezionalo dal menu a discesa del modello.
John is on the ElevenAgents growth team, with a focus on the healthcare industry.





