Eleven Music
了解如何通过自然语言提示词,使用 ElevenLabs 创作任意风格的录音室级音乐。
概述
Eleven Music 是一款文本转音乐模型,可根据自然语言提示词生成任意风格的录音室级音乐。它旨在理解创作意图,并根据目标生成完整、贴合上下文的音频。该模型既能理解自然语言,也能理解音乐术语,为你提供先进功能:
- 完全掌控流派、风格和结构
- 可生成带人声或纯器乐音乐
- 支持英语、西班牙语、德语、日语等多种语言
- 编辑单个段落或整首歌曲的声音和歌词
试听示例:
Eleven Music 与唱片公司、出版商及艺术家合作打造,已获准用于几乎所有商业用途,涵盖影视、播客、社交媒体视频、广告和游戏。有关不同套餐支持的使用方式,请查看音乐条款。
音频参考
音频参考功能可让你上传一段简短音轨,为新的 Music v2 或 v2.5 生成内容引导风格和声音。这会在文本提示词之外,为模型提供额外的创作参考。
要使用音频参考,请前往 音乐 > 生成,然后在 提示词 部分使用 + 参考 按钮添加音频参考。
你可以上传时长最多约 30 秒、采用常用音频格式的参考音轨。每个上传的参考音频在使用前都会经过版权合规审核。
音频参考会影响生成音轨的整体声音、制作风格、配器、节奏和氛围等特征。它不会复制或混音上传的音频,结果始终是新生成的作品。
音频参考旨在引导生成内容呈现相近的风格和声音,并非用于 流派转换。例如,上传爵士音轨后要求生成说唱版本, 可能无法获得稳定可靠的结果。
所有付费套餐均可使用 Music v2 和 v2.5 的音频参考功能。
音乐 Finetune
将 ElevenLabs 音乐模型微调为你的专属音色。音乐 Finetune 可让你基于自己的音频微调模型。上传你拥有的非版权受限音轨,即可创建能够持续体现个人风格、声音特征或品牌形象的个性化音乐模型版本。
标准音乐生成可以产出高质量音轨,但配器、质感、制作风格和氛围可能会有明显差异。Finetune 可让生成内容贴合特定的音频特征。训练完成后,使用 Finetune 生成的每首音轨都会体现数据集的音色、结构和特点,同时仍是全新的原创作品。
Finetune 可解决 AI 音乐生成中的 3 个核心难题:
- 品牌无法仅靠提示词打造专属声音
- 创作者无法在不同项目中稳定复现自己的风格
- 探索新想法的音乐人希望生成结果与自己的作品风格一致
通过基于音轨进行微调,创建的自定义 Finetune 能捕捉配器、节奏、制作风格、音色和人声特点等方面的风格模式。
工作原理
- 上传非版权受限音轨,我们会自动进行版权合规审核
- Finetune 约在 5-10 分钟后即可使用
- 在 ElevenCreative 中使用自定义 Finetune 生成音乐
符合条件的企业版客户可使用其完全拥有并控制的专有知识产权进行微调, 无需第三方版权审核。此功能专为拥有独家版权作品库的组织设计。 请联系客户经理启用此功能。
精选 Finetune
除自定义训练外,ElevenCreative 还提供由 ElevenLabs 创建、涵盖全球多种流派和风格的精选 Finetune,包括:
- Afro House 节拍
- 雷鬼顿
- 阿拉伯律动
- 70 年代柬埔寨摇滚
- 80 年代 Nu-Disco 复兴
- 莫扎特风格交响曲
符合条件的订阅用户可立即使用,无需上传音频。
使用方式
Eleven Music 现已在 ElevenLabs 网站上线。音乐 API 面向付费订阅用户开放,即将集成至我们的 Agents Platform。
Eleven Music 与唱片公司、出版商及艺术家合作打造,已获准用于几乎所有商业用途,涵盖影视、播客、社交媒体视频、广告和游戏。有关不同套餐支持的使用方式,请查看音乐条款。
关键信息
什么是 Music v2.5?
Music v2.5 是我们最先进的音乐模型。它在 Music v2 的基础上提升了音频质量和提示词遵循度,
并支持相同的工作流程,包括创作方案、音频参考和局部重绘。可在 Eleven Music 界面的模型下拉菜单中选择,
或在 API 中传入 model_id="music_v2_5"。Music v2 仍然可用。
什么是 Music v2?
Music v2 是 ElevenLabs 新一代 AI 音乐模型,相比 Music v1,在提示词遵循度、 作曲、提示词理解、多语言输出和人声表现方面都有所提升。新增功能包括:
- 使用上传的短音轨通过音频参考引导生成
- 长篇幅分段作曲
- 音轨中途切换流派
- 更快速、更复杂的人声表现,包括快速说唱和密集歌词模式
- 改进的局部重绘
- 嵌入音轨内的音效
Music v1 仍然可用吗?
Music v1 会在过渡期内继续提供。Music v2 是 UI 中新的默认模型。对于 API 生成, Music v1 会在过渡期内继续作为默认模型。此后,Music v2 将成为 UI 和 API 中的默认模型。 Music v1 停用前,至少会提前数月通知。
局部重绘如何运作?
在 UI 中,选择已生成歌曲的特定段落,只重新生成该段落, 不影响音轨其余部分。v2 的局部重绘质量有所提升。
生成音乐的最长时长是多少?
生成音乐最短为 3 秒,最长为 5 分钟。
是否提供 API?
是的,更多信息请参阅开发者快速入门。
可以将 Eleven Music 用于业务吗?
可以,Eleven Music 已获准用于几乎所有商业用途,涵盖影视、 播客、社交媒体视频、广告和游戏。有关不同套餐支持的使用方式, 请查看音乐条款。
支持哪些音频格式?
生成的音频提供 MP3(44.1kHz、128-192kbps)和 WAV 格式。
音乐 API 支持零保留模式吗?
是的,适用于使用 API 的企业版客户。请参阅零保留 模式,了解涵盖的端点。
什么是音频参考?
音频参考可让你上传一段时长最多约 30 秒的音轨,为新的 Music v2 或 v2.5 生成内容引导风格和声音。上传的音轨会与提示词共同作为创作指引,且每次上传都会 经过版权合规审核。
音频参考能混音歌曲或改变歌曲流派吗?
音频参考不是混音或流派迁移工具。它会引导声音、氛围、 配器和制作风格等特征。当所要求的输出与上传参考有较大差异时,结果可能不太稳定, 例如使用爵士乐参考来要求生成说唱音轨。