Dubbing v2のご紹介

本日、画期的な新しいAI吹き替えモデル、Dubbing v2をリリースします。

初めて、元の話者の感情や表現を、あらゆる言語に引き継げるようになりました。Dubbing v2は、文字起こしだけから平板でつながりのないオーディオを生成するのではなく、元の話し方を直接参照し、トーン、話すペース、表現、感情的な意図を維持します。

これにより、翻訳された音声を、まるで元の本人が実際に話したかのように聞かせるという、AI吹き替えにおける最大級の未解決課題の一つを解決します。

90以上の言語で元の表現を維持

従来のAI吹き替えシステムは、文字起こしに大きく依存しています。正確な翻訳は可能でも、生成されるオーディオでは、人の話し方を自然に感じさせるニュアンスが失われがちです。感情、タイミング、強調、ためらい、エネルギーは、テキストだけから再現するのが難しい要素です。

Dubbing v2は、この課題に異なる方法でアプローチします。元の話し方を直接参照することで、モデルが話者のイントネーションとトーンを捉え、言語をまたいで引き継ぎます。その結果、元の表現に忠実でありながら、格段に自然で表現豊かな吹き替えを実現します。

自然な多言語表現のために設計

優れた吹き替えは、単なる直訳ではありません。自然に聞こえるために、言語ごとに異なる言い回し、リズム、文構造が必要です。Dubbing v2は、元のコンテンツとの同期を保ちながら、話し言葉として自然になるよう翻訳を調整します。同期を考慮した翻訳システムが開始・停止・話すペースを自動で合わせるため、手作業による調整を減らし、プロが制作した吹き替えにより近い仕上がりを実現します。

高品質な吹き替えをもっと身近に

プロによる吹き替えは1分あたり数百ドルかかることもあり、翻訳者、ボイスアクター、編集者、オーディオエンジニアが関わる大規模な制作体制を必要とする場合が少なくありません。

Dubbing v2は、このプロセスを自動化します。クリエイターや企業は、複雑なワークフローを構築したり、複数のベンダーと調整したりすることなく、高品質な多言語コンテンツを制作できます。

クリエイター向け：自然なビデオで世界中の視聴者へ

クリエイターは、ElevenCreative内でワンクリックするだけで、YouTubeビデオやその他のコンテンツをローカライズできます。ビデオは、元のクリエイターの個性や話し方を保ちながら、どの言語の視聴者にも自然に聞こえるようになります。これにより、品質を犠牲にすることなく、世界中への配信を大幅に迅速かつ手軽に行えます。

今回のリリースにあわせて、Creator Dubbing Partner Programを開始します。対象となるクリエイターは、Dubbing v2を割引価格で利用できます。こちらからお申し込みください。

マーケター向け：大規模なキャンペーンローカライズ

マーケティングチームは、キャンペーンをゼロから作り直すことなく、国際市場向けに高品質なローカライズを行えます。広告、プロダクトビデオ、ブランドコンテンツでも、言語をまたいで同じ感情的なインパクトと表現スタイルを維持できます。ElevenCreativeは、ローカライズのワークフロー全体をエンドツーエンドで支援し、チームによる多言語キャンペーンの効率的な拡大を可能にします。

スタジオ・放送事業者向け：プロフェッショナルな吹き替えワークフロー

スタジオ、放送事業者、エンタープライズ向け制作では、ElevenProductionsがDubbing v2とプロフェッショナルなローカライズサービスを組み合わせます。人による翻訳、専門的なボイスキャスティング、プロ仕様のオーディオミキシングを含み、Dubbing v2が基盤となる音声生成と同期を担います。

その結果、プロ品質の多言語制作に対応する、拡張可能なワークフローを実現します。詳細を見る。

無料で始める

Dubbing v2は、本日からElevenCreativeおよびElevenProductionsで利用できます。今後7日間は、無料で始めることができます。無料プランでは1分間、スタータープランでは15分間、クリエイター＋プランでは30分間、無料で利用できます。

APIへのアクセスは近日提供予定です。詳しくは、営業に問い合わせるをご利用ください。