Dubbing v2のご紹介

本日、革新的な新しいAI吹き替えモデル、Dubbing v2をリリースします。

初めて、原話者の感情とパフォーマンスをあらゆる言語に引き継げるようになりました。文字起こしだけから平板で断片的なオーディオを生成するのではなく、Dubbing v2は元のパフォーマンスを直接参照し、声の調子、ペース、話し方、感情的な意図を保持します。

これにより、AI吹き替えにおける最大級の未解決課題の一つ、翻訳された音声をまるで本人が実際に話したかのように聞かせることを実現します。

90以上の言語で元のパフォーマンスを保持

従来のAI吹き替えシステムは、文字起こしに大きく依存しています。正確な翻訳は可能でも、生成されるオーディオでは、人の話し方を自然に感じさせるニュアンスが失われがちです。感情、タイミング、強調、ためらい、エネルギーは、テキストだけから再現することが困難です。

Dubbing v2は、この課題に異なる方法で取り組みます。元のパフォーマンスを直接参照することで、話者のイントネーションと声の調子を捉え、言語をまたいで引き継ぎます。その結果、元の話し方に忠実でありながら、格段に自然で表現力豊かな吹き替えを実現します。

自然な多言語音声のために設計

優れた吹き替えは、単なる直訳ではありません。自然に聞こえるためには、言語ごとに異なる言い回し、リズム、文構造が必要です。Dubbing v2は、元のコンテンツとの同期を保ちながら、話し言葉に適した翻訳に調整します。同期を考慮した翻訳システムが開始・終了のタイミングやペースを自動で合わせるため、手動調整の手間を減らし、プロが制作した吹き替えに近い仕上がりを実現します。

高品質な吹き替えをより身近に

プロの吹き替えには1分あたり数百ドルかかることもあり、翻訳者、ボイスアクター、編集者、オーディオエンジニアが関わる大規模な制作体制が必要になることも少なくありません。

Dubbing v2は、このプロセスを自動化します。クリエイターや企業は、複雑なワークフローを構築したり、複数のベンダーを調整したりすることなく、高品質な多言語コンテンツを制作できます。

クリエイター向け：自然な音声のビデオで世界中の視聴者へ

クリエイターは、ElevenCreative内でワンクリックするだけで、YouTube動画やその他のコンテンツをローカライズできます。ビデオは、元のクリエイターの個性や話し方を保ちながら、どの言語の視聴者にも自然に聞こえるようになります。品質を犠牲にすることなく、グローバルな配信を大幅に迅速かつ手軽に行えます。

今回のリリースに合わせて、Creator Dubbing Partner Programも開始します。対象となるクリエイターは、Dubbing v2を割引価格で利用できます。こちらから申し込む。

マーケター向け：キャンペーンを大規模にローカライズ

マーケティングチームは、キャンペーンを一から作り直すことなく、国際市場向けに高品質なローカライズを実現できます。広告、プロダクトビデオ、ブランドコンテンツは、言語をまたいでも同じ感情的なインパクトと表現スタイルを維持できます。ElevenCreativeがローカライズのワークフローをエンドツーエンドで支え、チームによる多言語キャンペーンの効率的な拡大を支援します。

スタジオと放送局向け：プロ仕様の吹き替えワークフロー

スタジオ、放送局、エンタープライズ向けの制作では、ElevenProductionsがDubbing v2とプロフェッショナルなローカライズサービスを組み合わせます。人による翻訳、専門家によるキャスティング、プロ仕様のオーディオミキシングを提供する一方、Dubbing v2が基盤となる音声生成と同期を担います。

その結果、プロ品質の多言語制作に対応する、拡張性の高いワークフローが実現します。詳細を見る。

無料で始める

Dubbing v2は、本日よりElevenCreativeおよびElevenProductionsで利用できます。今後7日間は、無料で始めることができます。無料プランでは1分、スタータープランでは15分、クリエイター＋プランでは30分間、無料でご利用いただけます。

APIへのアクセスは近日提供予定です。詳細については、営業に問い合わせるをご確認ください。