Vai alla navigazione

Presentazione di Speech Engine

ElevenLabs Speech Engine aggiunge la voce in tempo reale al tuo agente chat o LLM. ElevenLabs gestisce speech-to-text, gestione dei turni, text-to-speech e riproduzione nel browser, mentre il tuo server gestisce la logica dell’agente e trasmette il testo della risposta tramite un WebSocket di Speech Engine. Usalo quando vuoi aggiungere la voce a un runtime personalizzato anziché a una configurazione ElevenAgents completamente fornita.

ElevenAgents

  • Override del comportamento del testo: Aggiunto text_behavior_overrides, una mappa per ConversationInitiationSource di oggetti BehaviorOverride con campi facoltativi verbosity, output_format e interaction_budget per il comportamento dell’agente specifico per canale.
  • Fonti di integrazione: Aggiunti Intercom, Telegram e Freshdesk.
  • Tracce di conversazione OTLP: Ottieni i dettagli della conversazione ora accetta un parametro query format facoltativo. Imposta format=otlp_traces per restituire dati di traccia compatibili con OTLP insieme al payload standard della conversazione.
  • Override delle keyword ASR: Aggiunti gli schemi ASRConversationalConfigOverride e ASRConversationalConfigOverrideConfig con array keywords facoltativi, integrati nei modelli di override client della configurazione delle conversazioni.
  • Metadati di autenticazione webhook: Gli schemi di configurazione degli strumenti webhook ora espongono auth_resolved_params facoltativo (array di stringhe), che documenta i segnaposto URL risolti dalla connessione di autenticazione.

Musica

  • Modalità di generazione: Aggiunti MusicGenerationMode (track, loop, ambience) e un campo generation_mode facoltativo nei body delle richieste di prompt musicali.
  • Modello da video a musica: Da video a musica (POST /v1/music/video-to-music) ora accetta model_id facoltativo (stringa, valore predefinito music_v1).

ElevenCreative Studio

  • Crediti di conversione: I modelli di risposta per le statistiche di conversione di capitoli e voci ora includono credits_needed_to_convert facoltativo (numero intero), che indica i crediti richiesti prima della conversione.

Workspace

  • Tipi di risorsa: Aggiunto studio_projects a WorkspaceResourceType.

Release SDK

SDK Python

  • v2.50.0 - Rigenerato l’SDK per lo schema API del 25 maggio 2026.
  • v2.49.1 - Aggiornate le chiamate API di Speech Engine affinché restituiscano l’oggetto risposta completo.
  • v2.49.0 - Rigenerato l’SDK per lo schema API dal 18 al 25 maggio 2026, inclusi gli override del comportamento del testo di ElevenAgents, generation_mode per la musica e studio_projects per il workspace.

SDK JavaScript

  • v2.50.0 - Aggiunti metodi e test mancanti per l’API Music e rigenerato l’SDK per lo schema API del 25 maggio 2026.
  • v2.49.1 - Aggiornate le chiamate API di Speech Engine affinché restituiscano l’oggetto risposta completo.
  • v2.49.0 - Rigenerato l’SDK per lo schema API dal 18 al 25 maggio 2026, inclusi gli override del comportamento del testo di ElevenAgents, generation_mode per la musica e studio_projects per il workspace.

Pacchetti

API

Endpoint e schemi aggiornati

ElevenAgents

  • Ottieni i dettagli della conversazione - GET /v1/convai/conversations/{conversation_id}
    • Aggiunto il parametro query format facoltativo; otlp_traces restituisce dati di traccia compatibili con OTLP
  • Schemi di configurazione dell’agente
    • Aggiunta la mappa text_behavior_overrides, indicizzata da ConversationInitiationSource, con valori BehaviorOverride (verbosity, output_format, interaction_budget)
  • Enum ConversationInitiationSource
    • Aggiunti intercom_integration, telegram_integration e freshdesk_integration
  • Schemi di override ASR
    • Aggiunti ASRConversationalConfigOverride e ASRConversationalConfigOverrideConfig con keywords facoltativo (array di stringhe)
  • Schemi degli strumenti webhook
    • Aggiunto auth_resolved_params facoltativo (array di stringhe) nei modelli di configurazione webhook

Musica

  • Da video a musica - POST /v1/music/video-to-music
    • Aggiunto model_id facoltativo (stringa, valore predefinito music_v1)
  • Schemi delle richieste di prompt musicali
    • Aggiunto generation_mode facoltativo che fa riferimento a MusicGenerationMode (track, loop, ambience)

ElevenCreative Studio

  • Schemi delle statistiche di conversione di capitoli e voci
    • Aggiunto credits_needed_to_convert facoltativo (numero intero)

Workspace

  • Enum WorkspaceResourceType
    • Aggiunto studio_projects