ElevenLabs, 컴퓨텍스에서 NVIDIA ACE와 함께 다국어 AI 음성 기술 선보이다

가속 컴퓨팅의 선구자 NVIDIA와 협력하여 ElevenLabs의 사람 같은 AI 음성 기술로 새로운 경험을 선보입니다. 기존에는 여러 언어를 지원하는 기조연설을 위해 실시간 통역사나 자막이 필요했습니다. 이제 ElevenLabs는 독자적인 AI 음성 및 음성 복제 기술을 활용해 연사의 음성 특성을 그대로 살린 다국어 기조연설을 지원합니다. 

NVIDIA 창립자 겸 CEO 젠슨 황은 자신의 Computex 기조연설 여러 부분을 AI 음성으로 영어와 중국어로 녹음했습니다. 단 7분 분량의 녹음 오디오만으로 1시간 이내에 ElevenLabs에서 AI 음성을 만들 수 있었습니다. 기조연설에 합성 음성 기술을 활용한 것은 전환점이 됩니다. 더 폭넓은 청중이 콘텐츠에 접근할 수 있게 할 뿐 아니라, 이전에는 불가능했던 새로운 경험을 제공할 가능성도 열어주기 때문입니다.

기조연설을 넘어, 비디오 게임을 위한 역동적인 논플레이어 캐릭터(NPC)를 제작하기 위해서도 협력하고 있습니다. 전통적으로 NPC와의 상호작용은 짧고 정해진 대본에 따라 이루어졌습니다. 이제 개발자는 게이머에게 반응하고 적응하는 사람 같은 NPC를 추가하여, 더 몰입감 있고 현실감 있는 경험을 제공할 수 있습니다. 

NVIDIA ACE는 생성형 AI로 디지털 휴먼에 생명을 불어넣는 기술 모음입니다. ACE NIM 마이크로서비스는 디지털 휴먼, AI NPC, 인터랙티브 아바타를 구성하는 기반 요소입니다. 개발자는 개별 ACE NIM 마이크로서비스 또는 전체를 제품, 도구, 서비스, 게임 및 경험에 직접 통합할 수 있습니다. 

Covert Protocol 기술 데모는 이러한 상호작용을 구현하는 데 ElevenLabs 음성 AI를 사용합니다. 이를 경험한 개발자, 기자, 인플루언서들은 이 캐릭터들이 매우 현실적이고 몰입감을 준다고 평가했습니다. 톤과 음높이가 다양하게 변화하는 생생한 음성은 특히 플레이어의 몰입도를 높이는 능력으로 호평받았습니다.

“NVIDIA와 ElevenLabs가 하는 일은 실시간 상호작용과 게임부터 프레젠테이션, 접근성에 이르기까지, 세상과 상호작용하는 방식과 만들 수 있는 콘텐츠를 재편하고 있습니다.”라고 ElevenLabs의 CEO 겸 공동 창립자 마티 스타니셰프스키는 말합니다. “NVIDIA는 가속 컴퓨팅으로 생성형 AI 혁명을 위한 인프라를 구축했습니다. ElevenLabs는 모든 언어에서 확장 가능하고 감성적이며 개인화된 방식으로 생생한 콘텐츠를 생성하는 기술을 만들고 있습니다.”