ElevenLabs, 컴퓨텍스에서 NVIDIA ACE와 함께 다국어 AI 음성 기술 선보이다

ElevenLabs는 가속 컴퓨팅의 선구자인 NVIDIA와 협력하여, 사람처럼 자연스러운 AI 음성 기술로 새로운 경험을 제공합니다. 기존의 기조연설은 여러 언어 지원을 위해 실시간 통역사나 자막이 필요했습니다. 이제 ElevenLabs의 독자적인 AI 음성 및 음성 복제 기술로, 연사의 목소리 특징을 그대로 살린 다국어 기조연설이 가능합니다.

NVIDIA 창립자 겸 CEO 젠슨 황이 컴퓨텍스 기조연설의 여러 챕터를 영어와 중국어로 AI 음성을 활용해 진행했습니다. 그는 단 7분 분량의 녹음만으로, 한 시간도 채 안 되어 ElevenLabs에서 AI 음성을 만들 수 있었습니다. 이번 기조연설에서의 합성 음성 기술 활용은 중요한 전환점이 되었습니다. 더 많은 사람들이 콘텐츠를 쉽게 접할 수 있을 뿐만 아니라, 이전에는 불가능했던 새로운 경험을 제공할 수 있게 되었습니다.

기조연설을 넘어, ElevenLabs는 비디오 게임용 다이내믹 NPC(Non-Playable Character, 비플레이어 캐릭터) 제작을 위해 협력하고 있습니다. 기존의 NPC 상호작용은 짧고 정해진 대사에 그쳤지만, 이제 개발자들은 게이머의 반응에 따라 변화하고 적응하는 사람 같은 NPC를 추가해 더욱 몰입감 있고 현실적인 경험을 제공할 수 있습니다.

NVIDIA ACE는 생성형 AI로 디지털 휴먼을 구현하는 기술 모음입니다.ACE NIM 마이크로서비스는 디지털 휴먼, AI NPC, 인터랙티브 아바타의 핵심 요소입니다. 개발자는 개별 또는 모든 ACE NIM 마이크로서비스를 제품, 도구, 서비스, 게임 및 다양한 경험에 직접 통합할 수 있습니다.

Covert Protocol 기술 데모에서는 ElevenLabs 음성 AI가 이러한 상호작용을 지원합니다. 이 데모를 경험한 개발자, 기자, 인플루언서들은 캐릭터가 얼마나 현실적이고 몰입감 있게 느껴지는지 강조했습니다. 다양한 톤과 높낮이로 표현되는 생생한 목소리는 플레이어의 몰입감을 높여준다는 점에서 특히 호평을 받았습니다.

"NVIDIA와 ElevenLabs가 함께하는 일은 우리가 세상과 상호작용하는 방식, 그리고 실시간 상호작용과 게임, 프레젠테이션, 접근성 등 다양한 콘텐츠 제작 방식을 새롭게 바꾸고 있습니다."라고 ElevenLabs CEO 겸 공동 창업자 마티 스타니셰프스키가 말했습니다."NVIDIA는 가속 컴퓨팅으로 생성형 AI 혁명의 인프라를 구축했고, ElevenLabs는 어떤 언어로든 확장 가능하고 감정적이며 개인화된 생생한 콘텐츠를 만들어내는 기술을 개발하고 있습니다."