智能体平台

  • 默认 LLM 更新:将默认智能体 LLM 从 Gemini 1.5 Flash 更改为 Gemini 2.0 Flash,以提升性能。
  • 修复错误的对话放弃判定:改进对话延续检测,避免用户重复表达时过早判定对话已放弃。
  • 历史记录中的 Twilio 信息:在对话历史中新增 Twilio 通话详情,便于追踪。
  • 知识库重新设计:重新设计知识库界面。
  • 系统动态变量:新增系统动态变量,可在提示词和工具中将时间、对话 ID、来电者 ID 等系统值作为动态变量使用。
  • Twilio 客户端初始化:支持在智能体级别覆盖对话初始化客户端数据的 Twilio webhook。
  • 历史记录中的 RAG 分块:在历史记录视图的通话转录中新增 RAG 检索分块。

语音转文本

  • 价格下调:下调 Scribe 模型价格,详情见此处。
  • 改进 VAD 检测:增强语音活动检测,改进分段边界的停顿检测和静音片段处理。
  • 增强说话人分离:采用更优的 ECAPA 模型、对称连通矩阵以及更具选择性的说话人嵌入生成方式,改进说话人聚类。
  • 修复 ASR 错误:解决影响转写准确性的 VAD 舍入、静音和聚类问题。

ElevenCreative Studio

  • 禁用发布界面:可针对特定工作区成员禁用发布界面,以支持企业 workflow。
  • 快照 API 改进:修改项目和章节快照端点:无法下载快照时返回空列表,而非抛出错误。
  • 禁用自动审核:关闭 ElevenCreative Studio 中基于文本转语音生成内容的自动审核。

工作区

  • 修复 API 密钥编辑:解决编辑工作区 API 密钥时字符限制会被重置为零、导致密钥失效的问题。
  • 优化免费订阅:修复刷新免费订阅字符限制的问题。

API

新增端点

已更新端点

配音

项目管理

  • 更新项目端点:
    • 添加项目 - 将 metadata、project_name、description 设为可为空
    • 创建播客 - 将 title、description、author 设为可为空
    • 获取项目 - 将 last_modified_at、created_at、project_name 设为可为空
    • 添加章节 - 将 chapter_id、word_count、statistics 设为可为空
    • 更新章节 - 将 content 和 blocks 属性设为可为空

智能体平台

  • 更新智能体平台端点:
    • 更新智能体 - 将 conversation_config、platform_settings 设为可为空,并新增 workspace_overrides 属性
    • 创建智能体 - 将 agent_name、prompt、widget_config 设为可为空,并新增 workspace_overrides 属性
    • 添加到知识库 - 将 document_name 设为可为空
    • 获取对话 - 新增 twilio_call_data 模型,并将 transcript、metadata 设为可为空

文本转语音

音色管理

  • 更新音色端点:
    • 创建音色预览 - 新增 loudness、quality、guidance_scale 属性
    • 从预览创建音色 - 新增 speaker_separation 属性,并将 voice_id、name、labels 设为可为空
    • 获取音色 - 新增 speaker_boost、speaker_clarity、speaker_isolation 属性

语音转文本

其他更新