ElevenLabs が Computex で NVIDIA ACE を使用した多言語 AI 音声テクノロジーを展示

アクセラレーテッドコンピューティングのパイオニアであるNVIDIAと提携し、ElevenLabsの人間らしいAI音声技術による新たな体験を提供します。従来、基調講演で複数の言語に対応するには、通訳者や字幕が必要でした。現在、ElevenLabsは独自のAI音声技術とボイスクローン技術を活用し、話者の声の特徴を保った多言語の基調講演を実現しています。 

NVIDIAの創業者兼CEOであるジェンスン・フアンは、自身のComputex基調講演の複数の章を、AI音声を使って英語と中国語の両方でナレーションしました。わずか7分間の録音音声から、1時間以内にElevenLabs上でAI音声を作成しました。基調講演におけるこの合成音声技術の活用は、大きな転換点です。より幅広い人々がコンテンツにアクセスしやすくなるだけでなく、これまで不可能だった新たな体験を提供する可能性も開きます。

基調講演にとどまらず、ビデオゲーム向けの動的なノンプレイアブルキャラクター（NPC）を作るためにも提携しています。従来、NPCとのやり取りは短く、あらかじめ決められたものでした。今ではデベロッパーは、ゲーマーに反応し、適応する人間らしいNPCを追加でき、より没入感があり現実に近い体験を提供できます。 

NVIDIA ACEは、生成AIを活用してデジタルヒューマンに命を吹き込むテクノロジー群です。ACE NIMマイクロサービスは、デジタルヒューマン、AI NPC、インタラクティブアバターの構成要素です。デベロッパーは、個別のACE NIMマイクロサービス、またはすべてのマイクロサービスを、プロダクト、ツール、サービス、ゲーム、体験に直接統合できます。 

Covert Protocolテックデモは、ElevenLabsの音声AIを使ってこうしたやり取りを実現しています。実際に体験したデベロッパー、ジャーナリスト、インフルエンサーは、キャラクターがいかにリアルで魅力的に感じられるかを高く評価しています。トーンやピッチに変化のある生き生きとした声は、プレイヤーの没入感を高める点で特に高く評価されています。

「NVIDIAとElevenLabsが取り組んでいることは、世界との関わり方と、作り出せるコンテンツを変えつつあります。リアルタイムのインタラクションやゲームから、プレゼンテーション、アクセシビリティまで、幅広い領域に及びます」と、ElevenLabsのCEO兼共同創業者であるマティ・スタニシェフスキは述べています。「NVIDIAはアクセラレーテッドコンピューティングによって生成AI革命のインフラを構築しました。私たちは、あらゆる言語で生き生きとしたコンテンツを、スケーラブルかつ感情豊かでパーソナライズされた形で生成する技術を構築しています」