ElevenLabs, 컴퓨텍스에서 NVIDIA ACE와 함께 다국어 AI 음성 기술 선보이다

ElevenLabs는 가속 컴퓨팅의 선구자인 NVIDIA와 협력하여, 사람 같은 AI 음성 기술로 새로운 경험을 제공합니다. 기존에는 여러 언어를 지원하는 기조연설에 실시간 통역이나 자막이 필요했습니다. 이제 ElevenLabs는 자체 AI 음성 및 음성 복제 기술을 활용해 발표자의 음성 특성을 유지하는 다국어 기조연설을 지원합니다. 

NVIDIA 창립자 겸 CEO 젠슨 황은 Computex 기조연설의 여러 부분을 AI 음성으로 영어와 중국어로 녹음했습니다. 단 7분 분량의 녹음 오디오만으로 1시간 이내에 ElevenLabs에서 AI 음성을 만들 수 있었습니다. 기조연설에서 합성 음성 기술을 활용한 것은 전환점이 되었습니다. 더 많은 사람이 콘텐츠에 접근할 수 있게 했을 뿐 아니라, 이전에는 불가능했던 새로운 경험을 제공할 가능성도 열었기 때문입니다.

기조연설을 넘어, 비디오 게임을 위한 역동적인 논플레이어 캐릭터(NPC)를 만들기 위해서도 협력하고 있습니다. 기존 NPC 상호작용은 짧고 정해진 대본에 따른 경우가 많았습니다. 이제 개발자는 게이머에게 반응하고 적응하는 사람 같은 NPC를 추가해 더욱 몰입감 있고 현실적인 경험을 제공할 수 있습니다. 

NVIDIA ACE는 생성형 AI로 디지털 휴먼에 생명을 불어넣는 기술 모음입니다. ACE NIM 마이크로서비스는 디지털 휴먼, AI NPC, 인터랙티브 아바타를 구성하는 요소입니다. 개발자는 개별 ACE NIM 마이크로서비스 또는 전체를 제품, 도구, 서비스, 게임 및 경험에 직접 통합할 수 있습니다. 

Covert Protocol 기술 데모는 이러한 상호작용을 구현하는 데 ElevenLabs 음성 AI를 사용합니다. 이를 경험한 개발자, 저널리스트, 인플루언서들은 캐릭터가 얼마나 사실적이고 몰입감 있게 느껴지는지 강조했습니다. 톤과 음높이가 다양한 생생한 음성은 특히 플레이어 몰입도를 높이는 능력으로 호평받았습니다.

“NVIDIA와 ElevenLabs가 하는 작업은 실시간 상호작용과 게임부터 프레젠테이션, 접근성에 이르기까지 우리가 세상과 상호작용하는 방식과 만들 수 있는 콘텐츠를 바꾸고 있습니다.”라고 ElevenLabs의 CEO 겸 공동 창립자 마티 스타니셰프스키는 말합니다. “NVIDIA는 가속 컴퓨팅을 통해 생성형 AI 혁명을 위한 인프라를 구축했습니다. ElevenLabs는 어떤 언어로든 확장 가능하고, 감성적이며, 개인화된 방식으로 생생한 콘텐츠를 생성하는 기술을 만들고 있습니다.”