ElevenLabs 正式结束 Beta 阶段，发布 Eleven Multilingual v2 —— 支持近 30 种语言的基础 AI 语音模型
- 发布时间
- 语音 AI 平台 ElevenLabs在消除内容语言障碍方面迈出重大一步，推出支持 28 种语言多语言功能的全新基础深度学习模型—— 即 Eleven Multilingual v2
- 这一进展将帮助全球媒体公司、游戏开发者、出版商和独立创作者大幅提升内容无障碍性
- 自平台于 1 月推出以来，新增多项功能并持续改进；这些新能力也标志着公司 Beta 阶段正式结束
- ElevenLabs 的使命是让所有内容以任何语言、任何声音供所有人访问
ElevenLabs，全球领先的语音 AI 软件公司，今日推出全新多语言语音生成模型，可在近 30 种语言中精准生成“情感丰富”的 AI 音频。
这项完全基于内部研究的进展，可帮助创作者为欧洲、亚洲和中东的国际市场制作本地化音频内容。过去 18 个月，ElevenLabs 一直在分析人类语音的特征，构建理解语境和在语音生成中传达情感的新机制，并合成全新、独特的声音。
借助 Eleven Multilingual v2，将文本输入 ElevenLabs 的 文本转语音平台后，新模型可自动识别近 30 种书面语言，并以前所未有的真实感生成对应语音。
同时，无论使用合成声音还是克隆声音，讲话者独特的声音特征都会在所有语言中得以保留，包括原有口音。这意味着同一种声音可为 28 种不同语言的内容注入活力。
此次发布紧随面向平台所有创作者公开推出专业语音克隆之后。此次产品更新还提供了额外的安全与保障功能，用户可借此创建自己声音的完美数字副本，几乎无法与原声区分。今日发布后，声音将能使用多语言模型提供的近 30 种语言说话。
现支持的语言包括：中文、韩语、荷兰语、土耳其语、瑞典语、印度尼西亚语、菲律宾语、日语、乌克兰语、希腊语、捷克语、芬兰语、罗马尼亚语、丹麦语、保加利亚语、马来语、斯洛伐克语、克罗地亚语、古典 阿拉伯语和泰米尔语。
这些语言加入此前已支持的语言，包括英语、波兰语、德语、西班牙语、法语、意大利语、印地语和葡萄牙语。
随着近期新功能上线及平台持续改进，ElevenLabs 今日还确认平台正式结束 Beta 阶段。这一转变是公司致力于为全球超过 100 万用户提供可靠、前沿工具的重要里程碑。
展望未来，ElevenLabs 计划推出一项机制，让用户在平台上分享声音，并从新音频的发展中受益，为人机协作创造更多机会。
ElevenLabs CEO 兼联合创始人 Mati Staniszewski 表示：
ElevenLabs 创立时的梦想，是让所有内容以任何语言、任何声音供所有人访问。随着 Eleven Multilingual v2 的发布，我们离实现这一梦想更近一步，让接近人类品质的 AI 语音覆盖每一种方言。
“我们的文本转语音生成工具有助于创造更公平的环境，让所有创作者都能获得高品质语音音频能力。如今，这些优势已扩展至覆盖近 30 种语言的多语言应用。未来，我们希望借助 AI 覆盖更多语言和声音，消除内容的语言障碍。在 ElevenLabs，我们相信，无障碍性的这些进步最终将促进更多创造力、创新和多样性。
通过降低制作多语言高品质音频内容所需的成本和资源，ElevenLabs 正帮助公司和创作者制作更具想象力、更易访问，且能跨越文化与语言引起共鸣的内容。
对于独立游戏开发者和出版商，多语言语音生成工具为面向国际受众翻译游戏体验和音频内容带来新机会，让他们能以玩家和听众自己的语言建立联系，同时不牺牲语音音频的质量或准确性。
同样，教育机构如今可即时为学习者提供目标语言的准确音频内容，增强语言理解和发音能力，也能满足国际学生不同的教学方式和学习需求。
各类创作者都可使用 ElevenLabs 的工具，通过为视觉内容补充多语言语音，提升视障人士或有额外学习需求人群的内容无障碍性。
2023 年 1 月推出的首批 AI 语音工具，包括通过一系列预设合成声音将任意文本转换为语音，以及创建自己声音克隆的功能。多语言语音合成工具让 ElevenLabs 离实现“让所有内容以任何语言、任何声音供所有人访问”的使命更进一步。
这项技术已在多个创意领域和行业得到应用，包括帮助独立作者制作有声书、为电子游戏中的次要角色配音、支持视障人士访问在线书面内容，以及为全球首个 AI 广播频道提供技术支持。ElevenLabs 还与多家领先内容创作者和工作室合作，包括 AI 视频生成器 D-ID、全球最大有声书出版商之一 Storytel、开放科学视频平台 ScienceCast，其视频生成工具可浓缩发布于 arXiv 的科学研究论文、全球领先内容创作者平台 TheSoul Publishing、出色的游戏开发商，例如 Embark Studios 和Paradox Interactive，以及媒体平台 MNTN。
