Eleven Music
了解如何使用 ElevenLabs 通过自然语言提示词,创作任意风格的录音室级音乐。
概述
music_v1 模型已弃用,并将于 2027 年 1 月 31 日 移除。请迁移至
music_v2_5 以继续使用服务。如果请求未设置 model_id,请显式设置。参阅
已弃用模型。
Eleven Music 是一款文本转音乐模型,可通过自然语言提示词生成任意风格的录音室级音乐。它旨在理解意图,并根据目标生成完整、理解上下文的音频。该模型既能理解自然语言,也能理解音乐术语,提供先进功能:
- 完全掌控流派、风格和结构
- 可生成带人声或纯器乐音乐
- 支持多种语言,包括英语、西班牙语、德语、日语等
- 编辑单个段落或整首歌曲的声音和歌词
试听示例:
Eleven Music 与唱片公司、出版商和艺术家合作打造,已获准用于几乎所有商业用途,涵盖电影、电视、播客、社交媒体视频、广告和游戏。有关不同套餐支持的使用方式,参阅音乐条款。
音频参考
音频参考功能可让你上传一段短音轨,为新的 Music v2 或 v2.5 生成内容引导风格和声音。除文本提示词外,这还能为模型提供额外的创作参考。
要使用音频参考,请前往 音乐 > 生成,然后在 提示词 部分点击 + 参考 按钮添加音频参考。
你可以上传时长约 30 秒以内的常用音频格式参考音轨。每个上传的参考音轨都必须通过版权合规审核后才能使用。
音频参考会影响生成音轨的整体声音、制作风格、乐器编配、节奏和氛围等特征。它不会复制或混音上传的音频,生成结果仍是一首全新创作的作品。
音频参考旨在引导生成内容呈现相似的风格和声音,而非用于流派转换——例如,上传一首爵士乐音轨并要求生成说唱 版本,可能无法得到稳定可靠的结果。
所有付费套餐均可使用 Music v2 和 v2.5 的音频参考功能。
音乐 Finetune
将 ElevenLabs 音乐模型微调为你的专属声音。音乐 Finetune 可让你使用自己的音频微调模型。上传你拥有且无版权限制的音轨后,即可创建一个个性化音乐模型版本,持续体现你的风格、声音特色或品牌。
标准音乐生成可以产出高质量音轨,但乐器编配、质感、制作风格和氛围可能存在较大差异。Finetune 会让生成内容贴合你特定的音频特色。训练完成后,使用 Finetune 生成的每首音轨都会体现数据集的音色、结构和特点,同时仍是一首全新的原创作品。
Finetune 解决了 AI 音乐生成中的 3 个核心难题:
- 品牌无法仅通过提示词打造专属声音
- 创作者无法在不同项目中稳定复现自己的风格
- 探索新想法的音乐人希望生成结果符合其作品特色
通过使用你的音轨进行微调,创建的自定义 Finetune 能捕捉乐器编配、节奏、制作风格、音色和人声特质中的风格模式。
工作原理
- 上传无版权限制的音轨,我们会自动进行版权合规审核
- Finetune 约在 5-10 分钟后即可使用
- 在 ElevenCreative 中使用自定义 Finetune 生成音乐
符合条件的企业版客户可使用自己完全拥有并控制的专有知识产权进行微调,无需经过第三方版权审核。此功能专为拥有 独家版权作品库的组织设计。请联系客户经理启用此功能。
精选 Finetune
除自定义训练外,ElevenCreative 还提供 ElevenLabs 打造的精选 Finetune,涵盖全球多种流派和风格,包括:
- Afro House 节拍
- 雷鬼顿
- 阿拉伯律动
- 70 年代柬埔寨摇滚
- 80 年代 Nu-Disco 复兴
- 莫扎特风格交响曲
符合条件的订阅者可立即使用,无需上传。
使用方式
Eleven Music 现已在 ElevenLabs 网站上提供。音乐 API 面向付费订阅者开放,并将很快集成到我们的 Agents Platform。
Eleven Music 与唱片公司、出版商和艺术家合作打造,已获准用于几乎所有商业用途,涵盖电影、电视、播客、社交媒体视频、广告和游戏。有关不同套餐支持的使用方式,参阅音乐条款。
关键事实
什么是 Music v2.5?
Music v2.5 是我们最先进的音乐模型。它基于 Music v2,提升了音频质量和提示词遵循度,并支持相同的工作流程,包括创作计划、音频
参考和局部重绘。可在 Eleven Music 界面的模型下拉菜单中选择,或在 API 中传入
model_id="music_v2_5"。Music v2 仍可使用。
什么是 Music v2?
Music v2 是新一代 ElevenLabs AI 音乐模型,相比 Music v1,在提示词遵循度、 作曲、提示词理解、多语言输出和人声表现方面均有提升。新增功能包括:
- 使用上传的短音轨通过音频参考引导生成
- 长篇幅分段创作
- 音轨中途切换流派
- 更快、更复杂的人声表现,包括快速说唱和密集歌词模式
- 改进的局部重绘
- 嵌入音轨的音效
Music v1 还可用吗?
Music v1 将在过渡期内继续可用。Music v2 是 UI 中新的默认模型。对于 API 生成,Music v1 在过渡期内仍是默认模型。过渡期结束后,Music v2 将成为 UI 和 API 的默认模型。Music v1 弃用时,至少会提前数月通知。
局部重绘如何工作?
在 UI 中,选择生成歌曲的特定段落,仅重新生成该段落,不会影响音轨的其余部分。v2 的局部重绘质量有所提升。
生成音乐的最长时长是多少?
生成音乐最短时长为 3 秒,最长时长为 5 分钟。
有 API 吗?
有,更多信息请参阅开发者快速入门。
我可以将 Eleven Music 用于业务吗?
可以。Eleven Music 已获准用于几乎所有商业用途,涵盖电影、电视、播客、社交媒体视频、广告和游戏。有关不同套餐支持的使用方式,参阅音乐 条款。
支持哪些音频格式?
生成的音频支持 MP3(44.1 kHz、128-192 kbps)和 WAV 格式。
Music API 支持零保留模式吗?
支持,适用于使用 API 的企业客户。有关涵盖的端点,请参阅零保留 模式。
什么是音频参考?
音频参考功能可让你上传一段时长约 30 秒以内的音轨,为新的 Music v2 或 v2.5 生成内容引导风格和声音。上传的音轨会与提示词一同作为创作引导,且每次上传都需要通过版权合规审核。
音频参考可以混音歌曲或改变流派吗?
音频参考不是混音或流派转换工具。它会引导声音、氛围、乐器编配和制作风格等特征。当请求的输出与上传的参考差异很大时,结果可能不够可靠——例如,使用爵士乐参考来请求一首说唱音轨。