Dubbing v2 API
Dubbing v2 is nu beschikbaar via de API. Hiermee vertaal je audio en video naar meer dan 90 talen, met behoud van de stem, toon en het spreektempo van elke spreker.
De nieuwe projectgebaseerde API bewaart bronttranscripten en vertalingen als bewerkbare JSON. Maak een project van een bestand of URL, voeg een of meer doeltalen toe, bewerk afzonderlijke transcriptsegmenten of vertalingen en genereer vervolgens alleen de gewijzigde delen opnieuw. Volg de Dubbing-snelstartgids om je eerste nasynchronisatie te maken.
ElevenAgents
- Gespreksfilters voor guardrails: Gesprekken weergeven voegt optionele queryparameters
guardrail_types(GuardrailType[]) encustom_guardrail_names(stringarray) toe. De bestaande gesprekshiërarchie kan nu worden gefilterd met het optioneleparent_conversation_id(string). - Status van verschillen tussen branches: Agentbranches weergeven voegt het optionele
include_commit_status(boolean, standaardfalse) toe. Wanneer dit is ingeschakeld, bevatten branchsamenvattingen de nullable veldencommits_ahead,commits_behindenmerged_into_branch_id. - Bediening voor gesprekken en tools: Clientoverrides ondersteunen nu
max_duration_secondsenpronunciation_dictionary_locators. MCP-serverconfiguratie voegtrequest_metatoe om MCP-waarden van_metadoor te geven aan toolaanroepen, en time-outs voor webhooktools ondersteunen nu maximaal 300 seconden. - Gebruik van analyse na gesprekken: Gesprekskosten voegen een uitsplitsing van
analysistoe met lopende totalen per functie en momentopnamen van runs. Transcriptberichten voegentriggered_guardrailstoe en gespreksbeurten voegen het optioneleproducing_llmtoe.
Stemmen
- Zoekfilters voor stemmen: Alle stemmen v2 ophalen voegt de optionele queryparameters
gender,age,language,accent,use_cases,min_notice_period_days,include_custom_rates,include_live_moderatedenhigh_qualitytoe.
SDK-releases
JavaScript SDK
- v2.63.0 - Opties voor realtime Speech to Text toegevoegd voor secundaire talen, taal- en entiteitsdetectie, filtering van achtergrondgeluid, logging en authenticatie met tokens voor eenmalig gebruik. Events voor definitieve transcripties, entiteiten en ongeldige requests toegevoegd; dispatch van niet-geaccepteerde voorwaarden, dubbele parameters voor
audio_formaten inclusieve VAD-grenzen opgelost. - v2.62.0 - Methoden voor bulkupdates van Dubbing-transcripten en
DubbingRegenerateResponsetoegevoegd; filters voor gespreksguardrails, commitstatus voor agentbranches, waarschuwingen voor agents en ondersteuning voor MCPrequestMetatoegevoegd. Het maken van taaldoelen accepteert niet langermodelId. - v2.61.0 - Filtering van gesprekshiërarchieën, kosten voor analyses na gesprekken, metagegevens voor geactiveerde guardrails, details over mergeconflicten van branches, redactie van DTMF-invoer en uploads van Dubbing-transcripten toegevoegd. Geëxporteerde OpenAI-realtimesessietypen en toolresultaatvarianten van
run_subagent_*verwijderd.
Python SDK
- v2.63.0 - Opties voor realtime Speech to Text toegevoegd voor secundaire talen, taal- en entiteitsdetectie, filtering van achtergrondgeluid, logging en authenticatie met tokens voor eenmalig gebruik. Events voor definitieve transcripties, entiteiten en ongeldige requests toegevoegd; dispatch van niet-geaccepteerde voorwaarden opgelost en verbindingen zonder API-sleutel of token worden nu geweigerd.
- v2.62.0 - Dubbing-methoden voor
update_segmentsenDubbingRegenerateResponsetoegevoegd; ondersteuning voorguardrail_types,custom_guardrail_names,include_commit_statusen MCPrequest_metatoegevoegd. Updates van Dubbing-segmenten gebruiken nu requestbodymodellen en het maken van taaldoelen accepteert niet langermodel_id. - v2.61.0 -
parent_conversation_id, kosten voor analyses, metagegevens voor geactiveerde guardrails, mergeconflicten van branches, redactie van DTMF-invoer en uploads van Dubbing-transcripten toegevoegd. OpenAI-realtimesessietypen en resultaatmodellen vanrun_subagent_*verwijderd.
Android SDK
- v0.12.1 - Opgelost dat bedoelde verbrekingen van sessies met alleen tekst werden gemeld als
ConversationStatus.ERROR. - v0.12.0 -
ConversationConfig.useMediaStreamtoegevoegd om gespreksaudio via de Android-mediastream te routeren. Externe normale WebSocket-sluitingen melden nuDisconnectionDetails.Agent, terwijl lokaal geïnitieerde sluitingenDisconnectionDetails.Usermelden.
MCP-server
- v0.12.2 - Een probleem met path traversal opgelost.
API
API-wijzigingen bekijken
Nieuwe endpoints
Dubbing
- Bronsegmenten in bulk bijwerken -
PATCH /v1/dubbing/project/{project_id}/transcript/segments- Vereist
DubbingBulkSegmentUpdateRequest - Werkt brontekst, spreker of timing van segmenten atomair bij
- Retourneert
DubbingBulkSourceSegmentUpdateResponsemet de bijgewerktesegmentsenrevision
- Vereist
- Doelsegmenten in bulk bijwerken -
PATCH /v1/dubbing/project/{project_id}/language/{language_id}/transcript/segments- Vereist
DubbingBulkTargetSegmentUpdateRequest - Werkt vertalingen voor meerdere doelsegmenten atomair bij
- Retourneert
DubbingBulkTargetSegmentUpdateResponsemet de bijgewerktesegmentsenrevision
- Vereist
Bijgewerkte endpoints
ElevenAgents
- Gesprekken weergeven -
GET /v1/convai/conversations- Optioneel
parent_conversation_id(string) toegevoegd - Optionele herhaalbare
guardrail_types(GuardrailType[]) encustom_guardrail_names(stringarray) toegevoegd
- Optioneel
- Agentbranches weergeven -
GET /v1/convai/agents/{agent_id}/branches- Optioneel
include_commit_status(boolean, standaardfalse) toegevoegd - Branchsamenvattingen voegen nullable
commits_ahead(integer),commits_behind(integer) enmerged_into_branch_id(string) toe
- Optioneel
Stemmen
- Alle stemmen v2 ophalen -
GET /v2/voices- Optionele filters voor
gender,ageenaccent(string) toegevoegd - Optionele filters voor
languageenuse_cases(stringarray) toegevoegd - Optionele filters voor
min_notice_period_days(integer),include_custom_rates,include_live_moderatedenhigh_quality(boolean) toegevoegd
- Optionele filters voor
Schemawijzigingen
ElevenAgents
- Clientoverrideschema’s voegen
max_duration_seconds(integer) enpronunciation_dictionary_locators(array) toe - Invoer- en uitvoerschema’s voor MCP-servers voegen
request_meta-maps toe - Instellingen voor het agentplatform voegen
alertingtoe; taaldetectie voegtonly_at_conversation_start(boolean) toe AnalysisCharging.last_runis nu vereist en niet nullable; lopende totalen voegen het vereisteruns(integer) toe- RAG-chunkresponses vereisen nu
content_formatendocument_type