Skip to navigation

Scribe v2 Realtime

Scribe v2 Realtime, ons snelste en nauwkeurigste model voor live spraakherkenning, is officieel gelanceerd. Het biedt toonaangevende nauwkeurigheid in meer dan 92 talen met een ultralage latentie van 150 ms. Lees hier meer.

Agents Platform

  • Feedback van widgets na beëindiging van een gesprek: Widgets ondersteunen nu aanpasbare feedbackverzameling aan het einde van een gesprek met optionele velden voor beoordeling en opmerkingen, zodat je gebruikersfeedback rechtstreeks in je agentgesprekken kunt verzamelen.
  • Configuratie van zachte time-outs: Uitgebreide instellingen voor zachte time-outs toegevoegd om te bepalen hoe agents omgaan met stiltes in gesprekken, met configureerbare prompts en gedrag op het niveau van beurten en gesprekken.
  • Geavanceerd filteren van gesprekken: Het conversations-endpoint ondersteunt nu filteren op bereik van gespreksduur, evaluatieparameters, parameters voor gegevensverzameling en specifieke toolnamen.
  • Verbeterde gespreksfeedback: Systeem voor gespreksfeedback bijgewerkt met gestructureerde feedbacktypen, waaronder beoordelingen en opmerkingen, voor betere tracking van de gebruikerservaring.

ElevenCreative Studio

  • Uitgebreide projectmetadata: Projecten bevatten nu uitgebreide assettracking met videominiaturen, externe audioverwijzingen en verbeterde snapshotinformatie, waaronder audioduur.

Facturering

  • Verbeterde factuurgegevens: Factuurresponses bevatten nu gedetailleerde kortingsinformatie met een nieuwe array discounts, ter vervanging van de verouderde velden discount_percent_off en discount_amount_off. De velden subtotal_cents en tax_cents bieden een duidelijkere factuurspecificatie.

Music API

  • Verbeterde latentie voor het scheiden van stems: Het endpoint voor het scheiden van stems is bijgewerkt om audiobestanden beter te verwerken en voorspelbaardere latentie voor verwerkingsrequests te bieden.

SDK-releases

JavaScript SDK

  • v2.23.0 - Speech to Text-endpoint (Scribe) bijgewerkt naar scribe_realtime en aanvullende TypeScript-typen geëxporteerd voor een betere ontwikkelaarservaring.
  • v2.22.0 - Bijgewerkt met de nieuwste wijzigingen in het API-schema, waaronder gespreksfiltering, configuratie van zachte time-outs en feedbackfuncties voor widgets.

Python SDK

  • v2.22.1 - Speech to Text-endpoint (Scribe) bijgewerkt naar scribe_realtime en problemen met circulaire imports opgelost voor betere stabiliteit.
  • v2.22.0 - Bijgewerkt met de nieuwste wijzigingen in het API-schema, waaronder gespreksfiltering, configuratie van zachte time-outs en feedbackfuncties voor widgets.

Agents-pakketten

Android SDK

  • v0.5.0 - Functies setVolume en getVolume toegevoegd voor programmatische audiobediening, met een voorbeeldimplementatie inclusief een volumeschuifbalk in de voorbeeldapp.

API

Bijgewerkte endpoints

Agents Platform

Gespreksbeheer

  • Gesprekken ophalen

    • Queryparameter call_duration_min_secs (integer) toegevoegd om gesprekken te filteren op minimale gespreksduur
    • Queryparameter call_duration_max_secs (integer) toegevoegd om gesprekken te filteren op maximale gespreksduur
    • Queryparameter evaluation_params (array van strings) toegevoegd om te filteren op evaluatiecriteria
    • Queryparameter data_collection_params (array van strings) toegevoegd om te filteren op parameters voor gegevensverzameling
    • Queryparameter tool_names (array van strings) toegevoegd om gesprekken te filteren die specifieke tools gebruikten
  • Gespreksfeedback geven

    • Gebruikt nu ConversationFeedbackRequestModel met gestructureerde feedbacktypen
    • Veld type toegevoegd om de feedbackcategorie op te geven
    • Veld rating toegevoegd voor numerieke feedback
    • Veld comment toegevoegd voor tekstfeedback

Agentconfiguratie

  • Agentwidget ophalen
    • Veld end_feedback toegevoegd met WidgetEndFeedbackConfig voor het configureren van feedbackverzameling na beëindiging van een gesprek
    • Ondersteunt optionele velden voor beoordeling en opmerkingen in feedbackformulieren
  • Agent ophalen & Agent bijwerken
    • Responseschema bijgewerkt met nieuwe platformconfiguratieopties
    • Requestschema uitgebreid met aanvullende instellingsvelden

Configuratie van beurten en gesprekken

  • Agent maken, Gesprek simuleren, Gespreksstream simuleren

    • Veld soft_timeout_config toegevoegd om pauzegedrag tijdens gesprekken te beheren
    • Configuratie-overschrijvingen voor turn toegevoegd via TurnConfigOverride en TurnConfigOverrideConfig
    • initial_wait_time toegevoegd aan TurnConfig om de timing van de eerste reactie te bepalen
    • Configuratie beschikbaar op het niveau van gespreks- en workflow-overschrijvingen

Testen

  • Agenttests uitvoeren

    • Requestschema uitgebreid met ondersteuning voor workflowexpressies
    • Responseschema bijgewerkt met aanvullende velden voor testresultaten
  • Testaanroep ophalen

    • Response bevat verbeterde gegevens over testresultaten
    • Schema voor resultaten van workflowexpressies bijgewerkt

ElevenCreative Studio

  • Project ophalen

    • Veld assets (vereist) toegevoegd met video’s en externe audioverwijzingen
    • ProjectVideoResponseModel geïntroduceerd voor metadata van video-assets
    • ProjectExternalAudioResponseModel geïntroduceerd voor het bijhouden van externe audio
    • ProjectVideoThumbnailSheetResponseModel geïntroduceerd voor videominiaturen
  • Projectsnapshot ophalen

    • Response geherstructureerd met nieuw ProjectSnapshotExtendedResponseModel
    • Veld audio_duration_secs (vereist) toegevoegd aan snapshotgegevens
    • character_alignments verwijderd uit ProjectSnapshotResponseModel
    • ProjectSnapshotsResponseModel geïntroduceerd voor snapshotverzamelingen

Facturering

  • Abonnement ophalen
    • Array discounts (vereist) toegevoegd met items van DiscountResponseModel
    • Veld discount_percent_off verouderd verklaard (nog steeds beschikbaar, maar gemarkeerd voor verwijdering)
    • Veld discount_amount_off verouderd verklaard (nog steeds beschikbaar, maar gemarkeerd voor verwijdering)
    • Veld subtotal_cents (integer, nullable) toegevoegd voor factuurtotalen vóór belasting
    • Veld tax_cents (integer, nullable) toegevoegd voor belastingbedragen
    • Factuurvoorbeelden bijgewerkt met nieuwe velden voor korting en totaalbedrag

Speech to Text

Text to Speech

Stembeheer

Professional Voice Cloning (PVC)

Taalpresets

  • Taalpresetmodellen bevatten nu het veld soft_timeout_translation voor gelokaliseerde berichten over zachte time-outs

Triggers voor API-integratie

  • Nieuwe API-collectie geregistreerd: convai_api_integration_trigger_connections

Verouderingen

  • Factuurvelden discount_percent_off en discount_amount_off zijn verouderd; gebruik in plaats daarvan de array discounts