Einführung von Speech Engine

ElevenLabs Speech Engine fügt Ihrem eigenen Chat-Agenten oder LLM Echtzeit-Voice hinzu. ElevenLabs übernimmt Speech to Text, Sprecherwechsel, Text to Speech und die Browserwiedergabe, während Ihr Server die Agentenlogik verwaltet und Antworttext über einen Speech-Engine-WebSocket streamt. Nutzen Sie sie, wenn Sie Voice für eine benutzerdefinierte Runtime statt einer vollständig gehosteten ElevenAgents-Konfiguration benötigen.

ElevenAgents

  • Überschreibungen des Textverhaltens: text_behavior_overrides hinzugefügt, eine nach ConversationInitiationSource gegliederte Map aus BehaviorOverride-Objekten mit optionalen Feldern verbosity, output_format und interaction_budget für kanalspezifisches Agentenverhalten.
  • Integrationsquellen: Intercom, Telegram und Freshdesk hinzugefügt.
  • OTLP-Konversations-Traces: Konversationsdetails abrufen akzeptiert jetzt den optionalen Abfrageparameter format. Setzen Sie format=otlp_traces, um OTLP-kompatible Trace-Daten neben der Standard-Konversations-Payload zurückzugeben.
  • ASR-Schlüsselwortüberschreibungen: Die Schemas ASRConversationalConfigOverride und ASRConversationalConfigOverrideConfig mit optionalen keywords-Arrays wurden hinzugefügt und in Client-Override-Modelle für die Konfigurationskonversation eingebunden.
  • Webhook-Authentifizierungsmetadaten: Webhook-Tool-Konfigurationsschemas enthalten jetzt optional auth_resolved_params (String-Array), das URL-Platzhalter dokumentiert, die aus der Authentifizierungsverbindung aufgelöst werden.

Musik

  • Generierungsmodus: MusicGenerationMode (track, loop, ambience) und ein optionales Feld generation_mode in Request-Bodys für Musik-Prompts hinzugefügt.
  • Video-zu-Musik-Modell: Video zu Musik (POST /v1/music/video-to-music) akzeptiert jetzt optional model_id (String, Standardwert music_v1).

ElevenCreative Studio

  • Konvertierungs-Credits: Antwortmodelle für Kapitel- und Stimmenkonvertierungsstatistiken enthalten jetzt optional credits_needed_to_convert (Integer), das die vor der Konvertierung benötigten Credits angibt.

Workspaces

  • Ressourcentypen: studio_projects zu WorkspaceResourceType hinzugefügt.

SDK-Releases

Python SDK

  • v2.50.0 - SDK für das API-Schema vom 25. Mai 2026 neu generiert.
  • v2.49.1 - Speech-Engine-API-Aufrufe aktualisiert, damit sie das vollständige Antwortobjekt zurückgeben.
  • v2.49.0 - SDK für das API-Schema vom 18.–25. Mai 2026 neu generiert, einschließlich ElevenAgents-Überschreibungen des Textverhaltens, Musik-generation_mode und Workspace-studio_projects.

JavaScript SDK

  • v2.50.0 - Fehlende Music-API-Methoden und Tests hinzugefügt und das SDK für das API-Schema vom 25. Mai 2026 neu generiert.
  • v2.49.1 - Speech-Engine-API-Aufrufe aktualisiert, damit sie das vollständige Antwortobjekt zurückgeben.
  • v2.49.0 - SDK für das API-Schema vom 18.–25. Mai 2026 neu generiert, einschließlich ElevenAgents-Überschreibungen des Textverhaltens, Musik-generation_mode und Workspace-studio_projects.

Pakete

API

Aktualisierte Endpunkte und Schemas

ElevenAgents

  • Konversationsdetails abrufen - GET /v1/convai/conversations/{conversation_id}
    • Optionalen Abfrageparameter format hinzugefügt; otlp_traces gibt OTLP-kompatible Trace-Daten zurück
  • Agentenkonfigurationsschemas
    • text_behavior_overrides-Map mit ConversationInitiationSource als Schlüssel und BehaviorOverride-Werten (verbosity, output_format, interaction_budget) hinzugefügt
  • ConversationInitiationSource-Enum
    • intercom_integration, telegram_integration und freshdesk_integration hinzugefügt
  • ASR-Override-Schemas
    • ASRConversationalConfigOverride und ASRConversationalConfigOverrideConfig mit optionalem keywords (String-Array) hinzugefügt
  • Webhook-Tool-Schemas
    • Optionales auth_resolved_params (String-Array) in Webhook-Konfigurationsmodellen hinzugefügt

Musik

  • Video zu Musik - POST /v1/music/video-to-music
    • Optionales model_id (String, Standardwert music_v1) hinzugefügt
  • Request-Schemas für Musik-Prompts
    • Optionales generation_mode hinzugefügt, das auf MusicGenerationMode (track, loop, ambience) verweist

ElevenCreative Studio

  • Statistikschema für Kapitel- und Stimmenkonvertierung
    • Optionales credits_needed_to_convert (Integer) hinzugefügt

Workspaces

  • WorkspaceResourceType-Enum
    • studio_projects hinzugefügt