吹き替え
話者の感情、タイミング、トーンを保ちながら、オーディオとビデオを翻訳する方法をご紹介します。
概要
ElevenLabs 吹き替えは、各話者の感情、タイミング、トーン、個性を保ちながら、90以上の言語間でオーディオとビデオを翻訳します。元のバックグラウンドオーディオは保持されるため、サウンドトラックを再ミックスすることなく、各話者の話し方を別の言語で再現できます。主な用途は次のとおりです。
- 対象となるオーディエンスを4倍に拡大し、海外の視聴者にリーチ
- 感情のニュアンスを保ちながら、既存の素材を新たな市場向けに最適化
- 声優による再収録なしで、複数の言語でコンテンツを提供
ビデオやポッドキャストの制作者向けに、フルマネージドの吹き替えサービスも提供しています。
使用方法
- 自動吹き替え — 最新のDubbing v2 Alphaモデルを使用し、数クリックでコンテンツをある言語から別の言語へ吹き替えます。
- アップロード上限： アプリでは最大1GB・180分、APIではソースファイル1件あたり最大3GB
- ダビングスタジオ — トランスクリプトの編集、話者の再割り当て、クリップごとの再生成など、吹き替えを細かくコントロールできます。v1モデルでのみ利用できます。
- アップロード上限： 最大1GB・45分
- 注： ダビングスタジオはメンテナンスモードであり、重大なバグ修正のみ提供されます
- ElevenLabs Productionsによる人手検証済み吹き替え — 詳しくは、productions@elevenlabs.ioまでお問い合わせください。
クローンの強度
クローン強度は、ダビングv2 Alphaモデルの自動吹き替えで設定できる、0～10のスケールの設定です。アプリでSpeaker similarityをクリックして調整します。デフォルト値の7は、ほとんどのコンテンツで適切に機能します。値を高くすると元の話者との音声の類似性が優先されますが、音韻特性が大きく異なる言語間では不自然に聞こえることがあります。設定を高くすると、元のアクセントが吹き替え出力により多く引き継がれる場合もあります。値を低くすると、元の音声との類似性を犠牲にする代わりに、対象言語で自然に話すための自由度がモデルに与えられます。
主な機能
- 複数話者： 発話が重なっている場合でも、複数の話者を自動検出します。
- 多言語出力： 90以上の言語でローカライズされたトラックを生成します。
- 元の声を保持： 話者のアイデンティティと感情的なトーンを維持します。
- バックグラウンドオーディオを維持： 音楽、エフェクト、環境音を再ミックスする必要がありません。
- 対応ファイル形式： YouTube、TikTok、直接URL、ファイルアップロードなど、さまざまなソースのビデオとオーディオを吹き替えできます。
Dubbing v2にはウォーターマークの切り替え機能はありません。無料プランの吹き替えには自動的にウォーターマークが追加されますが、 有料プランの吹き替えには追加されません。Dubbing v2に、ウォーターマーク付きでクレジット料金を割引するオプションはありません。従来の v1吹き替えフローとダビングスタジオでのみ、ウォーターマーク割引を利用できました。
Dubbing v2では、API経由のトランスクリプト編集とオーディオ再生成はエンタープライズ プランでのみ利用できます。
料金
クレジット料金の詳細は、料金ページをご覧ください。
対応言語
吹き替えは、英語、スペイン語、フランス語、ドイツ語、日本語、中国語、アラビア語など、90以上の言語に対応しています。APIでは、source_languageおよびtarget_languageパラメータにBCP-47の言語タグ（例：frやes-MX）を指定できます。Dubbing v2では、es-MXなど地域を指定したタグは、以下に示す対応方言のいずれかである必要があります。その他すべての言語では、基本言語タグを使用します。Dubbing v1は方言に対応していません。
Dubbing v2の言語と方言
Dubbing v1の言語
Dubbing v1はEleven v3モデルと同じ言語に対応しています。地域を指定した方言タグには対応していないため、基本言語タグを使用してください。
重要事項
- Dubbing v2 Alpha — Dubbing v2は現在アルファ版です。モデルの改善を続けているため、ときどき不安定な動作が発生する場合があります。
- コンテンツの種類： すべてのオーディオおよびビデオコンテンツ形式に対応し、ファイルごとに最大32人の固有話者を扱えます。
- 話者の保持： 各話者のトーン、話す速さ、スタイルを対象言語でも保持します。
- 出力品質： 吹き替え済みビデオは高品質なプレビューであり、プロダクション用のマスターではありません。出力は通常1080pで、ソースの解像度と一致しない場合があります。オーディオはDubbing v1ではモノラル、Dubbing v2では最大ステレオのため、5.1などのマルチチャンネルオーディオは保持されません。プロダクション用途では、吹き替え済みオーディオをダウンロードし、元のビデオのオーディオトラックと置き換えてください。
- 同時実行数： すべてのセルフサービスプラン（無料、スターター、クリエイター、プロ、スケール、ビジネス）では、同時に最大3件の吹き替えジョブを実行でき、エンタープライズプランのデフォルトは10件です。上限はワークスペースごと、かつモデルごとに適用されるため、v1とv2のジョブで枠を共有しません。上限に達すると
too_many_concurrent_requestsエラーが発生します。新しいジョブを開始する前に、既存のジョブが完了するまでお待ちください。
よくある質問
リアルタイムまたはライブの吹き替えは利用できますか？
現在、リアルタイムまたはライブの吹き替えは利用できません。
吹き替えが失敗したり停止したりした場合はどうなりますか？
ダビングスタジオのジョブが失敗した場合、またはキャンセルした場合、クレジットは自動的に アカウントへ返金されます。Dubbing v2（自動吹き替えでは米ドルで分単位の料金設定）では、 失敗したジョブに対する料金は発生しません。吹き替えが長時間「Queued」または「Loading」のままの場合は、キャンセルして再送信 してください。その場合もクレジットは失われません。
Dubbing v2はAPIで利用できますか？
はい。吹き替えの作成とダウンロードはすべてのプランで利用できます。API経由のトランスクリプト編集と 再生成はエンタープライズプランでのみ利用できます。吹き替えの クイックスタートおよび吹き替えの調整と 再生成をご覧ください。
Dubbing v2プロジェクトを編集または再生成できますか？
アプリでは、Dubbing v2は自動で実行され、UIで編集できます。API経由のトランスクリプト編集とオーディオ 再生成はエンタープライズプランでのみ利用できます。吹き替えの調整と 再生成をご覧ください。従来のダビング スタジオは、従来のv1 モデルで利用できます。
従来のv1吹き替えモデルを使用するにはどうすればよいですか？
メインの吹き替えページにある自動吹き替えでは、デフォルトでDubbing v2が 使用されます。従来のv1モデルを使用するには、モデルとしてDubbing v1を選択してください。ダビング スタジオプロジェクトを作成するには、Dubbing v1を選択してから、Dubbing projectを選択します。v1を使用することが、 ダビングスタジオプロジェクトを作成する唯一の方法です。
吹き替えはどのビデオ解像度に対応していますか？
吹き替えでは最大4Kのソースビデオを受け付けます。出力解像度は異なり、常にソースと一致するわけでは ありませんが、最も一般的なのは1080pです。吹き替え済みビデオはプレビューとして扱ってください。プロダクションでは、 吹き替え済みオーディオを元のビデオのオーディオトラックと置き換えて使用します。