跳到导航

配音

了解如何翻译音频和视频,同时保留说话者的情感、时长与语气。

概述

ElevenLabs 配音可将音频和视频翻译为 90 多种语言,同时保留每位说话者的情感、时长、语气和独特特征。原始背景音频会被保留,因此无需重新混音,即可用另一种语言还原每位说话者的表达方式。可用于:

  • 将可触达受众扩大 4 倍,覆盖国际受众
  • 在保留情感细微差别的同时,为新市场改编现有素材
  • 无需重新录制配音,即可提供多语言内容

我们还为视频和播客创作者提供全托管配音服务。

使用方式

  • 自动配音 — 由最新的 Dubbing v2 Alpha 模型驱动,只需点击几次即可将内容从一种语言配音为另一种语言。
    • 上传限制: 应用中最大 1 GB 和 180 分钟,或通过 API 每个源文件最大 3 GB
  • 配音工作室 — 精细控制配音,包括编辑转录文本、重新分配说话者,以及按片段重新生成。仅适用于 v1 模型。
    • 上传限制: 最大 1 GB 和 45 分钟
    • 注意: 配音工作室现处于维护模式,仅接收关键 Bug 修复
  • 通过 ElevenLabs Productions 提供人工验证的配音 — 如需更多信息,请联系 productions@elevenlabs.io。

克隆强度

克隆强度是配音 v2 Alpha 模型中自动配音的可调设置,范围为 0 到 10。在应用中,点击 说话人相似度 进行调整。默认值 7 适用于大多数内容。较高的值会优先保留与原说话人的声音相似度,但对于语音特征差异很大的语言,听起来可能不够自然。较高设置也可能将更多原始口音带入配音输出。较低的值则让模型能更自由地以目标语言自然表达,但与原始声音的相似度会降低。

主要功能

  • 多说话者: 即使说话重叠,也能自动检测多位说话者。
  • 多语言输出: 生成 90 多种语言的本地化音轨。
  • 保留原始音色: 保留说话者的身份特征和情感语气。
  • 保留背景音频: 无需重新混音音乐、音效或环境声。
  • 支持的文件类型: 可从多种来源为视频和音频配音,包括 YouTube、TikTok、直接 URL 或上传文件。

Dubbing v2 不提供水印开关。免费版配音会自动添加水印; 付费版配音则不会。Dubbing v2 没有以水印换取积分折扣的选项。旧版 v1 配音流程和配音工作室是仅有提供水印折扣的地方。

对于 Dubbing v2,仅企业版 支持通过 API 编辑转录文本和重新生成音频。

费用

详细积分费用请参阅我们的定价页面。

支持的语言

配音支持 90 多种语言,包括英语、西班牙语、法语、德语、日语、中文、阿拉伯语等。API 在 source_language 和 target_language 参数中接受 BCP-47 语言标签,例如 fr 或 es-MX。在 Dubbing v2 中,诸如 es-MX 的区域限定标签必须是下方列出的受支持方言之一;其他所有语言均使用基础语言标签。Dubbing v1 不支持方言。

语言代码方言
南非荷兰语af—
阿坎语ak—
阿尔巴尼亚语sq—
阿姆哈拉语am—
阿拉伯语arar-EG
亚美尼亚语hy—
阿萨姆语as—
阿塞拜疆语az—
巴斯克语eu—
白俄罗斯语be—
波斯尼亚语bs—
保加利亚语bg—
缅甸语my—
粤语yue—
加泰罗尼亚语ca—
宿务语ceb—
中文zhzh-TW
克罗地亚语hr—
捷克语cs—
丹麦语da—
多格拉语dgo—
荷兰语nl—
英语enen-AU, en-CA, en-GB, en-US
爱沙尼亚语et—
菲律宾语(他加禄语)fil—
芬兰语fi—
法语frfr-CA, fr-FR
加利西亚语gl—
格鲁吉亚语ka—
德语de—
希腊语el—
古吉拉特语gu—
豪萨语ha—
希伯来语he—
印地语hi—
匈牙利语hu—
冰岛语is—
印度尼西亚语id—
意大利语it—
日语ja—
爪哇语jv—
卡纳达语kn—
哈萨克语kk—
基库尤语ki—
卢旺达语rw—
基隆迪语rn—
韩语ko—
吉尔吉斯语ky—
拉脱维亚语lv—
立陶宛语lt—
卢干达语lg—
马其顿语mk—
马来语ms—
马拉雅拉姆语ml—
普通话cmn—
马拉地语mr—
蒙古语mn—
尼泊尔语ne—
挪威语no—
波斯语fa—
波兰语pl—
葡萄牙语ptpt-BR, pt-PT
旁遮普语pa—
罗马尼亚语ro—
俄语ru—
北索托语nso—
塞索托语st—
信德语sd—
斯洛伐克语sk—
斯洛文尼亚语sl—
西班牙语eses-AR, es-CL, es-ES, es-MX
巽他语su—
斯瓦希里语sw—
斯威士语ss—
瑞典语sv—
塔吉克语tg—
泰米尔语ta—
泰卢固语te—
泰语th—
藏语bo—
聪加语ts—
茨瓦纳语tn—
土耳其语tr—
乌克兰语uk—
乌尔都语ur—
维吾尔语ug—
乌兹别克语uz—
文达语ve—
越南语vi—
瓦瑞语war—
威尔士语cy—
沃洛夫语wo—
约鲁巴语yo—
祖鲁语zu—

Dubbing v1 支持与 Eleven v3 模型相同的语言。不支持区域限定方言标签;请使用基础语言标签。

语言代码
南非荷兰语af
阿拉伯语ar
亚美尼亚语hy
阿萨姆语as
阿斯图里亚斯语ast
阿塞拜疆语az
白俄罗斯语be
孟加拉语bn
波斯尼亚语bs
保加利亚语bg
缅甸语my
粤语yue
加泰罗尼亚语ca
宿务语ceb
齐切瓦语ny
中文zh
克罗地亚语hr
捷克语cs
丹麦语da
荷兰语nl
英语en
爱沙尼亚语et
菲律宾语fil
芬兰语fi
法语fr
加利西亚语gl
格鲁吉亚语ka
德语de
希腊语el
古吉拉特语gu
豪萨语ha
希伯来语he
印地语hi
匈牙利语hu
冰岛语is
印度尼西亚语id
爱尔兰语ga
意大利语it
日语ja
爪哇语jv
卡纳达语kn
哈萨克语kk
韩语ko
吉尔吉斯语ky
拉脱维亚语lv
林加拉语ln
立陶宛语lt
卢森堡语lb
马其顿语mk
马来语ms
马拉雅拉姆语ml
马耳他语mt
毛利语mi
马拉地语mr
蒙古语mn
尼泊尔语ne
挪威语no
奥克语oc
奥里亚语or
普什图语ps
波斯语fa
波兰语pl
葡萄牙语pt
旁遮普语pa
罗马尼亚语ro
俄语ru
塞尔维亚语sr
信德语sd
斯洛伐克语sk
斯洛文尼亚语sl
索马里语so
西班牙语es
斯瓦希里语sw
瑞典语sv
他加禄语tl
塔吉克语tg
泰米尔语ta
泰卢固语te
泰语th
土耳其语tr
乌克兰语uk
乌尔都语ur
乌兹别克语uz
越南语vi
威尔士语cy
约鲁巴语yo

关键信息

  • Dubbing v2 Alpha — Dubbing v2 目前处于 Alpha 阶段。随着我们持续改进模型,偶尔可能会遇到一些不够完善的情况。
  • 内容类型: 支持所有音频和视频内容类型,每个文件最多可包含 32 位不同的说话者。
  • 保留说话者特征: 在目标语言中保留每位说话者的语气、语速和风格。
  • 输出质量: 配音视频是高质量预览,而非成片母版。通常以 1080p 输出,可能与源文件分辨率不同。Dubbing v1 的音频为单声道,Dubbing v2 最多为立体声,因此不会保留 5.1 及其他多声道音频。用于制作时,请下载配音音频并替换原始视频中的音轨。
  • 并发数: 所有自助方案(免费版、Starter、Creator、Pro、Scale、商业版)最多支持 3 个并发配音任务,企业版默认支持 10 个。限制按工作区和模型分别计算,因此 v1 和 v2 任务不共享配额池。如果达到限制,会收到 too_many_concurrent_requests 错误,请等待现有任务完成后再启动新任务。

常见问题

目前不支持实时或直播配音。

如果配音工作室任务失败或被取消,积分会自动退回到账户。 Dubbing v2(在自动配音中按分钟以美元计费)不会对 失败任务收费。如果配音长时间卡在“已排队”或“正在加载”状态,请取消后重新提交。 这样不会损失积分。

可以。所有方案都支持创建和下载配音。仅企业版支持通过 API 编辑转录文本和 重新生成。请参阅配音 快速入门和优化并重新生成 配音。

在应用中,Dubbing v2 是自动配音,可在 UI 中编辑。仅企业版支持通过 API 编辑转录文本和 重新生成音频。请参阅优化并重新生成 配音。旧版配音 工作室适用于旧版 v1 模型。

主配音页面的自动配音默认使用 Dubbing v2 模型。要使用旧版 v1 模型,请选择 Dubbing v1 作为模型。要创建配音 工作室项目,请选择 Dubbing v1,然后选择 配音项目。只有使用 v1 才能创建配音工作室项目。

配音接受最高 4K 的源视频。输出分辨率会有所不同,且不一定与 源文件相同,但最常见的是 1080p。请将配音视频视为预览:用于制作时,请使用 配音音频替换原始视频中的音轨。