吹き替え
吹き替え
話者の感情、タイミング、トーンを維持しながら、オーディオとビデオを翻訳する方法をご紹介します。
概要
ElevenLabsの吹き替えは、各話者の感情、タイミング、トーン、固有の特性を保ちながら、90以上の言語にわたってオーディオとビデオを翻訳します。元のバックグラウンドオーディオは保持されるため、サウンドトラックを再ミックスすることなく、各話者の話し方を別の言語で再現できます。以下の用途に活用できます:
- リーチ可能なオーディエンスを4倍に拡大し、海外の視聴者に届ける
- 感情的なニュアンスを保ちながら、既存の素材を新しい市場向けに調整する
- ボイスアクターによる再収録なしで、多言語のコンテンツを提供する
ビデオやポッドキャストのクリエイター向けに、フルマネージドの吹き替えサービスも提供しています。
使用方法
- 自動吹き替え — 最新のDubbing v2 Alphaモデルにより、数クリックでコンテンツをある言語から別の言語へ吹き替えます。
- アップロード制限: アプリでは最大1GB・180分、API経由ではソースファイルごとに最大3GB
- ダビングスタジオ — 文字起こしの編集、話者の再割り当て、クリップ単位の再生成など、吹き替えを細かく制御できます。v1モデルでのみ利用できます。
- アップロード制限: 最大1GB・45分
- 注: ダビングスタジオはメンテナンスモードであり、重大なバグ修正のみを提供します
- ElevenLabs Productionsによる人手検証済みの吹き替え — 詳しくは、productions@elevenlabs.ioまでお問い合わせください。
クローン強度
クローン強度は、ダビングv2 Alphaモデルの自動吹き替えで設定できる、0~10のスケールの設定です。アプリでSpeaker similarityをクリックして調整します。デフォルト値の7は、ほとんどのコンテンツで適切に機能します。値を高くすると元の話者との音声の類似性が優先されますが、音韻特性が大きく異なる言語間では不自然に聞こえることがあります。設定を高くすると、元のアクセントが吹き替え出力により多く引き継がれる場合もあります。値を低くすると、元の音声との類似性を犠牲にする代わりに、対象言語で自然に話すための自由度がモデルに与えられます。
主な機能
- 複数話者: 発話が重なっている場合でも、複数の話者を自動検出します。
- 多言語出力: 90以上の言語でローカライズされたトラックを生成します。
- 元の声を保持: 話者のアイデンティティと感情的なトーンを保持します。
- バックグラウンドオーディオを維持: 音楽、エフェクト、環境音の再ミックスを避けられます。
- 対応ファイル形式: YouTube、TikTok、直接URL、ファイルアップロードなど、さまざまなソースのビデオとオーディオを吹き替えできます。
Dubbing v2には透かしの切り替え機能はありません。無料プランの吹き替えには自動的に透かしが追加され、 有料プランの吹き替えには追加されません。Dubbing v2には、透かしを付けてクレジットを割引するオプションもありません。透かし割引が利用できたのは、 従来のv1吹き替えフローとダビングスタジオのみです。
Dubbing v2では、API経由の文字起こし編集とオーディオ再生成はエンタープライズ プランでのみ利用できます。
コスト
詳細なクレジット料金については、料金ページをご覧ください。
対応言語
吹き替えは、英語、スペイン語、フランス語、ドイツ語、日本語、中国語、アラビア語など、90以上の言語に対応しています。APIでは、source_languageおよびtarget_languageパラメータにBCP-47言語タグ(例:frまたはes-MX)を指定できます。Dubbing v2では、es-MXのような地域修飾タグは、以下に示す対応方言のいずれかである必要があります。その他すべての言語では基本言語タグを使用します。Dubbing v1は方言に対応していません。
Dubbing v2の言語と方言
Dubbing v1の言語
Dubbing v1はEleven v3モデルと同じ言語に対応しています。地域修飾方言タグには対応していないため、基本言語タグを使用してください。
主なポイント
- Dubbing v2 Alpha — Dubbing v2は現在アルファ版です。モデルの改善を続けているため、場合によっては不完全な点が見られることがあります。
- コンテンツタイプ: すべてのオーディオおよびビデオコンテンツタイプに対応しており、ファイルごとに最大32人の固有話者を扱えます。
- 話者の維持: 各話者のトーン、話す速度、スタイルを対象言語でも維持します。
- 同時実行数: すべてのセルフサービスプラン(無料、スターター、クリエイター、プロ、スケール、ビジネス)では、最大3件の吹き替えジョブを同時に実行でき、エンタープライズプランのデフォルトは10件です。制限はワークスペースごと、かつモデルごとに適用されるため、v1とv2のジョブはプールを共有しません。制限に達した場合は、
too_many_concurrent_requestsエラーが返されます。新しいジョブを開始する前に、既存のジョブが完了するまでお待ちください。
FAQ
リアルタイムまたはライブ吹き替えは利用できますか?
現在、リアルタイムまたはライブ吹き替えは利用できません。
吹き替えが失敗した、または停止した場合はどうなりますか?
ダビングスタジオのジョブが失敗した場合、またはキャンセルした場合は、クレジットが自動的に アカウントへ返金されます。Dubbing v2(自動吹き替えでは米ドルで分単位の料金)は、失敗した ジョブには課金されません。吹き替えが長時間QueuedまたはLoadingのままの場合は、キャンセルして再送信してください。 クレジットは失われません。
Dubbing v2はAPIで利用できますか?
はい。吹き替えの作成とダウンロードはすべてのプランで利用できます。API経由の文字起こし編集と 再生成はエンタープライズプランでのみ利用できます。吹き替えの クイックスタートおよび吹き替えの調整と再生成をご覧ください。
Dubbing v2プロジェクトを編集または再生成できますか?
アプリでは、Dubbing v2は自動化されており、アプリ内エディターはありません。API経由の文字起こし編集とオーディオ 再生成はエンタープライズプランでのみ利用できます。吹き替えの調整と再生成をご覧ください。UIで編集するには、 ダビングスタジオで従来のv1モデルを使用してください。
従来のv1吹き替えモデルを使用するにはどうすればよいですか?
メインの吹き替えページの自動吹き替えでは、デフォルトでDubbing v2を使用します。 従来のv1モデルを使用するには、モデルとしてDubbing v1を選択してください。ダビングスタジオ プロジェクトを作成するには、Dubbing v1を選択してから、Dubbing projectを選択します。v1を使用することが、 ダビングスタジオプロジェクトを作成する唯一の方法です。