Apresentamos o Eleven v4Conheça o Eleven v4, nosso modelo mais expressivo até agora.

Pular para o conteúdo

Scribe v3 Live Medical ajuda agentes conversacionais a acertar os detalhes clínicos

Escrito por
John Durovsik
Publicado

OuvirOuça este artigo

Um agente de voz age com base no que ouve durante uma chamada ao vivo. Quando um paciente diz que toma sitagliptina para diabetes, o agente pode adicioná-la à lista de medicamentos para o profissional de saúde analisar. Mas é fácil entender nomes de medicamentos errado. Em nossos testes, vimos um modelo de fala transcrever sitagliptina como citalopram, um antidepressivo. Para muitas pessoas, essas ligações são o primeiro passo para entrar em contato com sua equipe de cuidados, e um agente só pode ajudar se as ouvir corretamente.

Hoje, a ElevenLabs lança o Scribe v3 Live Medical, que leva a transcrição médica para chamadas ao vivo. Ele é baseado no Scribe v3 Live, nosso mais recente modelo de Speech to Text em tempo real, e otimizado para linguagem clínica. Já está disponível no ElevenAgents.

Por que chamadas ao vivo precisam de transcrição médica

A ElevenLabs já oferece transcrição médica para áudio gravado, como ditados e gravações de consultas. Mas grande parte do que as equipes de saúde desenvolvem funciona em tempo real, desde agendamentos e linhas de informações médicas até verificações de elegibilidade por telefone e acompanhamentos de solicitações de reembolso. Essas chamadas não podem esperar uma gravação terminar. 

Nomes e doses de medicamentos raramente aparecem na fala cotidiana, por isso são as palavras que um modelo geral em tempo real tem mais probabilidade de errar. O Scribe v3 Live Medical é nossa primeira transcrição médica desenvolvida para agentes, levando o foco clínico do Scribe v2 Medical para conversas em tempo real. Em nossos testes com o PriMock57, um conjunto público de simulações de consultas médicas ao vivo, o Scribe v3 Live Medical cometeu menos erros do que qualquer outro modelo médico que avaliamos.

Chamadas em que os detalhes clínicos importam

O Scribe v3 Live Medical foi desenvolvido para chamadas de pacientes, beneficiários e profissionais de saúde em que os detalhes são clínicos, como um medicamento na triagem, um procedimento em uma autorização prévia ou um sintoma em uma chamada de acompanhamento. Muitos agentes de saúde também atendem chamadas sem nenhum detalhe clínico, como remarcar uma consulta ou perguntar sobre o horário de atendimento. O Scribe v3 Live Medical melhora a precisão dos detalhes clínicos e mantém sua precisão na fala cotidiana, para que as equipes possam usá-lo em todas as chamadas.

Ferramentas para conversas clínicas

Adicione até 10.000 termos personalizados

As equipes de saúde podem adicionar até 10.000 termos próprios, e o Scribe v3 Live Medical usa a lista apenas quando quem liga parece dizer um deles. Isso é suficiente para que um sistema regional de saúde carregue todos os nomes de profissionais e clínicas de suas unidades, ou para que uma empresa farmacêutica carregue todo o seu portfólio por nome comercial e genérico. Com uma lista de termos personalizados carregada, o Scribe v3 Live Medical cometeu até 48% menos erros em termos médicos nos nossos testes.

Espere quem liga terminar

Quem liga costuma informar um ID de beneficiário ou uma data de nascimento em partes, fazendo pausas entre grupos de dígitos enquanto os encontra em um cartão. Um agente que trata cada pausa como o fim de uma fala interrompe no meio do número, e a pessoa precisa começar de novo. O Scribe v3 Live Medical reconhece quando um número ainda não foi concluído, então o agente espera o restante antes de responder.

Acompanhe pacientes em vários idiomas

Pacientes e cuidadores podem mudar de idioma no meio da chamada, por exemplo, para descrever um sintoma com mais facilidade em seu idioma nativo. O Scribe v3 Live Medical oferece suporte a mais de 90 idiomas e acompanha essas mudanças, para que a fala em um segundo idioma seja transcrita em vez de ignorada.

O que as equipes de saúde estão observando

As equipes já estão desenvolvendo agentes com o Scribe v3 Live Medical.

“A experiência de interação com o Eleven v4 Turbo e o Scribe v3 Live Medical é fenomenal”, afirma Idin Jafari, Diretor de Estratégia Digital & Inovação da Pfizer. “O agente soa realista e é mais preciso nos nomes comerciais e genéricos que surgem em nossas conversas.”

Nas chamadas de pacientes, essa precisão se reflete no que as equipes de cuidados analisam depois da ligação.

“A ElevenLabs continua elevando o padrão, e isso permite que a Vintage Labs avance mais rápido. Nossa plataforma VIA realiza chamadas antes e depois de procedimentos para grandes sistemas acadêmicos de saúde. Com o Scribe v3 Live Medical, ela entende melhor os pacientes: seus medicamentos, seus procedimentos, os nomes de seus médicos”, diz Shantanu Ghorai, Fundador & COO da Vintage Labs AI. “A detecção de fim de fala espera os pacientes terminarem de informar sua data de nascimento antes de responder, e o modo multilíngue acompanha quando quem liga muda para o espanhol. Agora, os enfermeiros podem confiar no resumo da chamada sem precisar reproduzir a gravação.”

Como avaliamos o Scribe v3 Live Medical

Testamos o Scribe v3 Live Medical em comparação com modelos de Speech to Text em tempo real de fornecedores líderes, incluindo modelos médicos especializados e modelos de uso geral, todos nas mesmas gravações. Usamos dois benchmarks públicos de conversas entre médicos e pacientes, comparamos o Scribe v3 Live Medical ao Scribe v3 Live em fala médica e cotidiana e testamos termos médicos em inglês, francês e alemão. Os resultados estão em inglês, salvo indicação em contrário. 

Apresentamos a taxa de erro de palavras (WER), a proporção de palavras transcritas incorretamente, e a WER semântica, que conta apenas erros que alteram o significado. A WER semântica considera “20 mg” e “vinte miligramas” equivalentes, por isso suas pontuações são menores do que as da WER. 

Observação: estes resultados vêm de testes internos da ElevenLabs com fornecedores selecionados no modo em tempo real, usando cada modelo em sua melhor configuração disponível. Eles não incluem todos os modelos disponíveis.

Consultas de atenção primária (PriMock57)

O PriMock57 inclui 57 simulações de consultas ao vivo de atenção primária, com cerca de 9 minutos cada, entre profissionais clínicos e atores interpretando pacientes. As conversas não tinham roteiro de nenhum dos lados. Os atores trabalharam com cartões de casos que abordavam sintomas, histórico médico e medicamentos em uso, e os profissionais conduziram cada consulta como fariam em uma situação real. As chamadas ocorreram por software de telemedicina, com os profissionais em laptops e os pacientes em celulares, em um ambiente de escritório com ruído de fundo.

Usamos esse benchmark porque ele reúne o que torna as chamadas de pacientes difíceis de transcrever: conversas espontâneas de ida e volta, áudio telefônico com ruído de fundo e muitos detalhes clínicos. O Scribe v3 Live Medical teve a menor WER entre os modelos médicos que testamos (12,8%), com 17% menos erros do que o segundo mais próximo.

Scribe v3 Live Medical has the lowest WER at 12.8%, 17% below the next medical model.

Entrevistas com pacientes (Fareez OSCE)

O Fareez OSCE reúne 272 entrevistas gravadas com pacientes no formato que as faculdades de medicina usam para testar habilidades clínicas, o Exame Clínico Objetivo Estruturado (OSCE). Em cada uma, um médico residente ou estudante de medicina em fase avançada pergunta a alguém interpretando o paciente sobre seus sintomas e histórico. Como uma equipe diferente o gravou em outro país, o conjunto mostra se os resultados se mantêm com novos falantes, configurações de gravação e condições. O Scribe v3 Live Medical teve a menor WER semântica entre os modelos médicos que testamos (0,6%).

Fareez OSCE benchmark results

Comparado ao Scribe v3 Live

O Eka Medical ASR contém mais de 3.600 gravações em inglês de médicos e estudantes de medicina, com foco em termos médicos e nomes comerciais de medicamentos. O Scribe v3 Live Medical cometeu 4,7% menos erros no Eka Medical ASR do que o Scribe v3 Live (11% vs. 11,54% de WER semântica).

Modelo

Eka Medical ASR (WER semântica)

Scribe v3 Live Medical

11%

Scribe v3 Live

11.54%

Fala cotidiana (Common Voice e FLEURS)

Common Voice é o conjunto de frases lidas em voz alta por voluntários da Mozilla, e FLEURS é o conjunto do Google de frases curtas não clínicas lidas em mais de 100 idiomas. Avaliamos ambos em seus conjuntos em inglês para garantir que as equipes que usam o Scribe v3 Live Medical não percam precisão na fala cotidiana. Até mesmo uma frase que menciona um medicamento é composta principalmente por palavras do dia a dia, portanto um modelo médico precisa acertar ambas. 

O Scribe v3 Live Medical tem desempenho praticamente igual ao do Scribe v3 Live em ambos.

Scribe v3 Live Medical is nearly as accurate as Scribe v3 Live on Common Voice and FLEURS

Precisão médica em vários idiomas (MED-Term)

Muitas equipes de saúde atendem pacientes em mais de um idioma. O MED-Term, um benchmark público da Corti, é um conjunto de descrições faladas de casos clínicos em inglês, francês e alemão, cada uma elaborada em torno de termos médicos raros e especializados. Nós o usamos para verificar como o Scribe v3 Live Medical lida com vocabulário clínico além do inglês. Sua WER semântica foi de 2,24% em inglês, 2,81% em alemão e 3,24% em francês. 

Idioma

WER semântica (MED-Term)

Inglês

2.24%

Alemão

2.81%

Francês

3.24%

Baixa latência em chamadas ao vivo

Em uma chamada ao vivo, um agente não pode responder até ter a transcrição, então qualquer atraso na transcrição se torna uma pausa que quem liga ouve. O Scribe v3 Live transcreve a fala em cerca de 150 milissegundos e, nos testes, o Scribe v3 Live Medical iguala essa latência, de modo que seu foco clínico não acrescenta nenhum atraso perceptível.

O que menos erros significam para as equipes de saúde

É mais fácil avaliar taxas de erro em uma chamada real. Uma chamada de triagem de 10 minutos tem cerca de 1.500 palavras entre quem liga e o agente. Com as taxas de erro do PriMock57 acima, o Scribe v3 Live Medical acertaria cerca de 40 palavras a mais do que o próximo melhor modelo médico que testamos. Para uma equipe que atende 1.000 chamadas por dia, isso representa cerca de 40.000 palavras a mais transcritas corretamente todos os dias. Nem toda palavra tem o mesmo peso. Um “hum” omitido é inofensivo. Entender um medicamento errado coloca o remédio incorreto em uma solicitação de renovação de receita, e um dígito errado em um ID de beneficiário interrompe uma verificação de elegibilidade. Qualquer um desses casos pode resultar em uma nova chamada, uma transferência para a equipe ou um paciente tendo que se repetir.

Proteção das informações de saúde

Agentes de saúde ouvem informações de saúde protegidas (PHI) em muitas chamadas, incluindo nomes, datas de nascimento, IDs de beneficiários, medicamentos e sintomas. O Scribe v3 Live Medical é elegível para HIPAA para clientes empresariais que tenham um acordo de associado comercial (BAA) em vigor e o Zero Retention Mode ativado.

O Scribe v3 Live Medical é executado no ElevenAgents, coberto por nossos programas de conformidade, incluindo SOC 2 Tipo II, ISO 27001 e PCI DSS Nível 1. Por padrão, os dados dos pacientes são armazenados nos EUA. Equipes empresariais que precisam armazená-los fora dos EUA podem usar ambientes isolados na UE, Índia ou Singapura.

Primeiros passos

O Scribe v3 Live Medical está disponível hoje no ElevenAgents. 

Acesse Configurações > Reconhecimento Automático de Fala e selecione-o no menu suspenso de modelos. 

Escrito por

John is on the ElevenAgents growth team, with a focus on the healthcare industry.

Artigos relacionados

Crie com o áudio de IA da mais alta qualidade