配音

使用 ElevenLabs 配音翻译音频和视频文件。

概览

配音可借助语音翻译、说话人检测和音频配音,在数秒内将内容翻译成 90 多种语言。

自动配音或视频翻译,是指将视频原始音频翻译并替换为新语言,同时保留原始说话人声音独特特征的过程。

新建配音项目

指南

1在导航菜单中前往 配音。
2

上传视频或音频文件,或选择 粘贴 URL 标签页,为 YouTube、 TikTok 等平台的视频配音。

3选择要配音成的一种或多种语言。
4

点击 说话人相似度,调整配音声音模仿原始 说话人的程度。

5

点击生成按钮提交配音任务。系统会显示费用,并要求确认 请求。

6配音完成后,可在配音列表中下载。

对于配音 v2,仅企业版套餐支持通过 API 编辑转录文本和重新生成音频。

克隆强度

克隆强度是配音 v2 Alpha 模型中自动配音的可调设置,范围为 0 到 10。在应用中,点击 说话人相似度 进行调整。默认值 7 适用于大多数内容。较高的值会优先保留与原说话人的声音相似度,但对于语音特征差异很大的语言,听起来可能不够自然。较高设置也可能将更多原始口音带入配音输出。较低的值则让模型能更自由地以目标语言自然表达,但与原始声音的相似度会降低。

常见问题

ElevenLabs 的创立理念之一是打造出色的配音工具:让你使用演员原声、保留原有表演效果,为所需的任意语言创建完美配音,让所有内容更易获取。

要开始使用,请前往 Dubbing,上传音频或视频文件,或粘贴 URL,为 YouTube、TikTok 或其他在线平台的视频配音 。

在 Choose languages 选择器中选择目标配音语言。此处选择的每种语言都会计费。完整说明请参阅 Dubbing 如何收费?。 

默认情况下,将使用最新的 Dubbing 模型 v2。使用 v2 模型创建的配音为自动生成,应用内无法编辑内容。仅企业版支持通过 API 编辑转录文本和重新生成音频。

通过网站使用 Dubbing v2 时,上传文件限制为 2 GB 和 180 分钟,必须同时低于这两项限制。

如需深入了解 Dubbing 及其使用方法,强烈建议阅读完整文档。

如果想创建可编辑配音的配音工作室项目,请选择 Dubbing v1 模型,然后选择 Dubbing project。

注意: 配音工作室目前处于维护模式,仅接收关键漏洞修复。

所有套餐均可使用 Dubbing,包括免费套餐。免费套餐生成的配音会自动添加水印,且无法移除。付费订阅不提供水印功能。

对于 Dubbing v2,仅企业版支持通过 API 编辑转录文本和重新生成音频。

对于 Dubbing v2,仅企业版套餐支持通过 API 编辑转录文本和重新生成音频。

所有套餐都支持通过 API 创建和下载配音。若要编辑源转录文本或翻译并重新生成音频,需要企业版工作区。请参阅优化并重新生成配音。

Dubbing 按源媒体时长和每种目标语言计费。具体费率取决于所用的配音模型,详情请参阅定价页面。在应用中,配音开始前会显示总费用供你确认。

通过 Dubbing API 创建的配音项目至少会收取一种语言的费用。创建项目时,会根据源文件时长预先收取一种语言的配音费用,该费用将预付首个目标语言:

  • 创建项目时,源文件准备期间即会收取此费用,而非添加首个语言时。
  • 添加的第一个语言(或创建项目时通过 target_language 排队的语言)会使用这笔预付费用,不会额外收费。
  • 排队添加的每个额外语言都会单独收费。

失败处理

  • 如果项目准备失败,例如无法转录源文件,将退还创建费用。
  • 如果额外语言生成失败,将退还该语言的费用。
  • 第一个语言由项目创建费用预付。如果生成失败,创建费用不会退还,但预付款不会丢失:仍可使用,因此在同一项目中重试该语言不会产生额外费用。
  • 删除项目或语言不会退还已在运行的配音费用。

配音工作室可导出以下格式:

  • MP4(视频)
  • AAC(音频)
  • AAF(时间线数据)
  • SRT(字幕)
  • WAV(音频:每位说话者单独轨道,以 zip 文件下载)

Dubbing v2 会返回单个无损音频文件。

配音视频是高质量预览,不是制作母版。通常以 1080p 导出,可能与源文件分辨率不一致。Dubbing v1 的音频为单声道,Dubbing v2 最多为立体声,因此无法保留 5.1 和其他多声道音频。用于制作时,请下载配音音频,并用它替换原始视频中的音轨。

可上传以下格式的音频和视频文件进行 Dubbing。视频分辨率最高可达 4K。

  • AAC
  • AIFF
  • AVI
  • FLAC
  • M4A
  • M4V
  • MKV
  • MOV
  • MP3
  • MP4
  • MPEG
  • MPG
  • OGA
  • OGG
  • OPUS
  • WAV
  • WEBA
  • WEBM
  • WMV
  • 3GPP

目前,ElevenLabs 的 Dubbing 不提供口型同步功能。可通过第三方模型在 Image & Video、Flows 和 Studio 中使用口型同步。

默认情况下,创建新配音时会使用最新的 Dubbing v2 模型。使用 v2 模型创建的配音为自动生成,应用内无法编辑内容。仅企业版支持通过 API 编辑转录文本和重新生成音频。

如需使用配音工作室,请选择 Dubbing v1 模型,然后选择 Dubbing project。

无法将现有的自动配音转换为配音项目。

新配音项目会显示在配音项目列表顶部,并在生成期间经历多个阶段。

处理完成后,点击三点图标并选择 Edit,即可打开配音项目。

有关配音工作室的更多信息,请参阅我们的概览。

If you downgrade your tier or cancel your subscription altogether, you will not be able to use the paid features anymore, such as Instant Voice Cloning and Professional Voice Cloning. However, at the time of writing this, we do not delete any of your data, and it will still be there when you feel ready to upgrade again.

Dubbing Studio is in maintenance mode and receives critical bug fixes only.

A track clone refers to a voice clone that is derived from the entire track in a dubbing project. This means that the voice clone will be made from a combination of all of the clips on that track. This is the default behavior and is good for creating voice clones that have a bit of the characteristics of all the clips combined and usually give the AI enough data to create a proper clone. However, if the voice changes quite drastically throughout, it might create a voice that is a bit more unstable.

On the other hand, a clip clone refers to a voice clone that is derived from a specific clip on a track. This allows you to create different voice clones from specific clips and assign that same voice to other clips where you want the tonality or performance. This can be great if you feel like a specific track has exactly the performance you want and want to apply this to other clips too, or perhaps, you want to apply this to the whole track.

One helpful tip mentioned in the content is to find a clip that you like, where you feel the voice is good, right-click to create a clone from that clip, and then assign that clone to the whole track to achieve a consistent voice throughout. This is just one tip and may not work for all circumstances, but it can work very well in some cases.

如果无法下载配音后的音频或视频,请尝试使用其他浏览器,并关闭广告拦截器和弹窗拦截器。

Brave 浏览器最常出现此问题,但其他浏览器也可能发生。大多数情况下,切换浏览器或禁用拦截器即可解决问题。

默认情况下,创建新配音时会使用最新的 Dubbing v2 模型。使用 v2 模型创建的配音为自动生成。Dubbing v2 应用内没有编辑按钮。

编辑按钮仅在使用配音工作室时可用,而配音工作室仅适用于旧版 v1 配音模型。要使用配音工作室,请选择 Dubbing v1 作为模型,然后选择 Dubbing project。

对于 Dubbing v2,仅企业版套餐可通过 API 编辑转录文本并重新生成音频。

注意: 配音工作室现处于维护模式,仅接收严重错误修复。

No results