跳至内容

ElevenLabs 发布全新语音 AI 产品,并完成 8000 万美元 B 轮融资

发布时间

收听收听本文

1 月 22 日/全球——ElevenLabs是一家语音技术研究公司,已完成一轮 8,000 万美元 B 轮融资,由Andreessen Horowitz、Nat Friedman和Daniel Gross共同领投,并获得Sequoia Capital、SV Angel、Smash Capital、BroadLight Capital和Credo Ventures参投,以巩固其在全球语音 AI 研究和产品落地领域的领导地位。

自公开发布以来,ElevenLabs 一直引领自然语音合成领域,让用户能在广泛的语言和口音中创建、设计AI 语音,并呈现丰富的情感和语调。自发布以来,ElevenLabs 用户已生成超过100 年时长的音频,公司规模也从 5 人增长至40 名员工。如今,41% 的《财富》500 强企业员工正在使用 ElevenLabs 技术。

ElevenLabs 技术已应用于众多垂直领域,帮助创作者通过旁白配音和 AI 配音提升受众体验,扩大教育资源获取渠道,并为有声书出版、娱乐、个人使用及无障碍服务提供创新解决方案。本轮融资将用于进一步完善产品,同时确保 AI 技术安全落地。

除今日公布 B 轮融资外,ElevenLabs 还发布了多项产品更新,将在未来几周上线:

  • 新版配音工作室工作流支持为整部影片配音,以及生成和编辑转录文本、译文与时间码,让内容制作拥有更精细的控制。这些功能补充了现有的 AI 配音功能,后者可自动完成覆盖 29 种语言的端到端视频本地化。
  • 全新声音库市场,为用户提供安全的平台,通过自己声音的 AI 版本获得收益。用户可创建、验证专业 AI 声音复刻版,并通过声音库分享。其他人使用这些已验证的声音时,原始创作者可获得报酬。用户始终可自行控制声音是否可用及其报酬条款。该市场已为一小批 Alpha 用户带来收入。
  • 抢先体验版移动端 App 阅读器,可即时将文本和 URL 转为音频,方便用户在移动途中通过另一种媒介获取内容。作为试用优惠,应用首 3 个月免费,用户可通过等候名单登记抢先体验。

2023 年,ElevenLabs 还扩大了在出版、游戏、媒体和对话式领域的布局,并与多家大型媒体机构建立 B2B 合作伙伴关系,包括:

  • 出版:Storytel、The Washington Post、Rheinische Post、Curio
  • 对话式 AI:FlowGPT、SimpleTalk AI、Ollang、VoiceDrop、Vana
  • 媒体与娱乐:Wondershare Filmora、Futuri Media、TheSoul Publishing
  • 游戏:Paradox Interactive、NetEase、Inworld AI

这些最新产品发布和合作伙伴关系,紧随 ElevenLabs 持续扩展工具套件之后,所有工具均基于内部研究开发。已发布的产品包括:用于逼真语音合成的文本转语音,以及针对低延迟优化的 Turbo 模型;声音设计和语音克隆,用于创建定制声音;语音转语音,用于将一种声音转换为另一种声音。公司还推出行业领先的AI 配音工具,可自动将音频和视频翻译成29 种语言,同时保留原说话者的声音和情感。公司还将很快把目前仅支持英语的 Turbo 和语音转语音模型扩展至更多语言。

基于支撑这些功能的研究,ElevenLabs 还开发了适用于更复杂工作流的高级工具,例如面向出版的Studio,以及用于视频本地化的配音工作室。Studio可简化出版商对长篇内容的编辑、结构化、浏览和生成,配音工作室则可让用户亲自控制转录文本、翻译和片段时间安排,帮助内容面向全球受众做好准备。

公司还开发了面向社区的产品,例如声音库——一个分享 AI 生成声音的平台。声音库此前仅支持分享通过声音设计工具创建的人工声音,现在作为新推出的声音库市场的一部分,用户还可分享通过专业语音克隆创建并验证过的声音复刻版。声音库市场支持用户在其他人使用这些声音时获得收益。为确保市场安全和完整性,ElevenLabs 使用专业语音克隆技术创建高保真声音复刻版。分享声音前,用户须在指定时间内朗读一段提示词,通过声音验证码验证,确认其声音与训练样本一致。此流程结合 ElevenLabs 团队的审核和人工批准,确保分享并获利的声音真实且经过用户验证,打造更安全、可信的环境。

安全、负责任地开发 AI 是 ElevenLabs 的核心优先事项,重点是实现检测能力,确保所有 AI 生成内容都能清晰识别。公司去年推出了AI 语音分类器,该工具可验证音频样本是否包含 ElevenLabs 生成的内容。今年,公司将增强分类器能力,使其覆盖更多语音 AI 模型,并与其他分发平台合作以实现更广泛部署。ElevenLabs 正在积极开发额外保障措施,提升公共领域的安全性。

借助这轮 B 轮投资,ElevenLabs 将巩固其在全球语音 AI 研究和产品落地领域的领导地位。资金将用于推进研究、扩展基础设施、为特定垂直领域开发新产品,并加强安全措施,确保 AI 技术以负责任且合乎道德的方式发展。

ElevenLabs CTO Piotr Dąbkowski 补充道:

“团队的投入已为语音 AI 带来持久影响。这笔新融资让我们能够迎接更大的挑战,并专注于保持在研究和产品开发上的竞争优势。”

Mati Staniszewski 总结道:

“我们的愿景始终未变——通过打破语言和沟通障碍,改变我们与内容互动的方式。我们正打造前沿技术,让内容跨越语言——也跨越声音——变得触手可及,使每个人都能连接到重要的信息和故事。迄今取得的进展证明了团队和投资者的投入。我们的旅程才刚刚开始,但我们正携手塑造无障碍与沟通的未来。”

相关内容

用高质量 AI 音频创作