Scribe v2 Realtime

Scribe v2 Realtime, हमारा सबसे तेज़ और सबसे सटीक लाइव स्पीच रिकग्निशन मॉडल, आधिकारिक रूप से लॉन्च हो गया है। यह 92 से ज़्यादा भाषाओं में अत्याधुनिक सटीकता और बेहद कम 150ms लेटेंसी देता है। यहाँ और पढ़ें।

Agents प्लेटफ़ॉर्म

  • विजेट कॉल-एंड फ़ीडबैक: विजेट अब कस्टमाइज़ किए जा सकने वाले कॉल-एंड फ़ीडबैक कलेक्शन का समर्थन करते हैं। वैकल्पिक रेटिंग और टिप्पणी फ़ील्ड के साथ, आप अपनी एजेंट बातचीत में सीधे यूज़र फ़ीडबैक जुटा सकते हैं।
  • सॉफ्ट टाइमआउट कॉन्फ़िगरेशन: बातचीत में विराम को एजेंट कैसे संभालें, इसे नियंत्रित करने के लिए व्यापक सॉफ्ट टाइमआउट सेटिंग्स जोड़ी गई हैं। इनमें टर्न और बातचीत स्तरों पर कॉन्फ़िगर किए जा सकने वाले प्रॉम्प्ट और व्यवहार शामिल हैं।
  • उन्नत बातचीत फ़िल्टरिंग: conversations endpoint अब कॉल अवधि की रेंज, मूल्यांकन पैरामीटर, डेटा कलेक्शन पैरामीटर और खास टूल नामों के आधार पर फ़िल्टरिंग का समर्थन करता है।
  • बेहतर बातचीत फ़ीडबैक: बेहतर यूज़र अनुभव ट्रैकिंग के लिए बातचीत फ़ीडबैक सिस्टम को रेटिंग और टिप्पणियों समेत स्ट्रक्चर्ड फ़ीडबैक प्रकारों के साथ अपडेट किया गया है।

ElevenCreative Studio

  • विस्तृत प्रोजेक्ट मेटाडेटा: प्रोजेक्ट्स में अब वीडियो थंबनेल, बाहरी ऑडियो रेफरेंस और ऑडियो अवधि समेत बेहतर स्नैपशॉट जानकारी के साथ व्यापक एसेट ट्रैकिंग शामिल है।

बिलिंग

  • बेहतर इनवॉइस विवरण: इनवॉइस रिस्पॉन्स में अब नए discounts array के साथ विस्तृत डिस्काउंट जानकारी शामिल है, जो हटाए जा रहे discount_percent_off और discount_amount_off फ़ील्ड की जगह लेता है। subtotal_cents और tax_cents फ़ील्ड इनवॉइस का अधिक स्पष्ट विवरण देते हैं।

Music API

  • स्टेम सेपरेशन लेटेंसी में सुधार: स्टेम सेपरेशन endpoint को ऑडियो फ़ाइलों को बेहतर ढंग से संभालने और प्रोसेसिंग रिक्वेस्ट के लिए अधिक अनुमानित लेटेंसी देने के लिए अपडेट किया गया है।

SDK रिलीज़

JavaScript SDK

  • v2.23.0 - Speech to Text (Scribe) endpoint को scribe_realtime पर अपडेट किया गया और बेहतर डेवलपर अनुभव के लिए अतिरिक्त TypeScript types एक्सपोर्ट किए गए।
  • v2.22.0 - बातचीत फ़िल्टरिंग, सॉफ्ट टाइमआउट कॉन्फ़िगरेशन और विजेट फ़ीडबैक सुविधाओं समेत नवीनतम API schema बदलावों के साथ अपडेट किया गया।

Python SDK

  • v2.22.1 - Speech to Text (Scribe) endpoint को scribe_realtime पर अपडेट किया गया और बेहतर स्थिरता के लिए circular import समस्याएँ ठीक की गईं।
  • v2.22.0 - बातचीत फ़िल्टरिंग, सॉफ्ट टाइमआउट कॉन्फ़िगरेशन और विजेट फ़ीडबैक सुविधाओं समेत नवीनतम API schema बदलावों के साथ अपडेट किया गया।

Agents पैकेज

  • @elevenlabs/client@0.10.0 - रीयलटाइम endpoint कॉन्फ़िगरेशन अपडेट किया गया और दस्तावेज़ बेहतर किए गए।
  • @elevenlabs/react@0.10.0 - रीयलटाइम endpoint कॉन्फ़िगरेशन अपडेट किया गया और दस्तावेज़ बेहतर किए गए।
  • @elevenlabs/types@0.2.0 - type definitions को नवीनतम API schema बदलावों के अनुरूप अपडेट किया गया।
  • @elevenlabs/react@0.9.2 - मामूली बग फ़िक्स और स्थिरता में सुधार।
  • @elevenlabs/convai-widget-embed@0.5.1 - कॉल-एंड फ़ीडबैक समर्थन के साथ विजेट embed फ़ंक्शनैलिटी अपडेट की गई।
  • @elevenlabs/convai-widget-core@0.5.1 - विजेट core में कॉल-एंड फ़ीडबैक कॉन्फ़िगरेशन जोड़ा गया।
  • @elevenlabs/convai-widget-embed@0.5.0 - कस्टमाइज़ किए जा सकने वाले कॉल-एंड फ़ीडबैक कलेक्शन का समर्थन जोड़ा गया।
  • @elevenlabs/convai-widget-core@0.5.0 - फ़ीडबैक हैंडलिंग के लिए WidgetEndFeedbackConfig और WidgetEndFeedbackType जोड़े गए।
  • @elevenlabs/client@0.9.2 - क्लाइंट कॉन्फ़िगरेशन को नवीनतम API बदलावों के साथ अपडेट किया गया।

Android SDK

  • v0.5.0 - प्रोग्रामैटिक ऑडियो नियंत्रण के लिए setVolume और getVolume फ़ंक्शन जोड़े गए। सैंपल ऐप में वॉल्यूम seek bar वाला उदाहरण इम्प्लीमेंटेशन भी शामिल है।

API

अपडेट किए गए Endpoints

Agents प्लेटफ़ॉर्म

बातचीत प्रबंधन

  • बातचीत प्राप्त करें

    • न्यूनतम कॉल अवधि के आधार पर बातचीत फ़िल्टर करने के लिए call_duration_min_secs query parameter (integer) जोड़ा गया
    • अधिकतम कॉल अवधि के आधार पर बातचीत फ़िल्टर करने के लिए call_duration_max_secs query parameter (integer) जोड़ा गया
    • मूल्यांकन मानदंड के आधार पर फ़िल्टरिंग के लिए evaluation_params query parameter (strings का array) जोड़ा गया
    • डेटा कलेक्शन पैरामीटर के आधार पर फ़िल्टरिंग के लिए data_collection_params query parameter (strings का array) जोड़ा गया
    • खास टूल का इस्तेमाल करने वाली बातचीत फ़िल्टर करने के लिए tool_names query parameter (strings का array) जोड़ा गया
  • बातचीत फ़ीडबैक दें

    • अब स्ट्रक्चर्ड फ़ीडबैक प्रकारों के साथ ConversationFeedbackRequestModel का उपयोग करता है
    • फ़ीडबैक श्रेणी बताने के लिए type फ़ील्ड जोड़ा गया
    • संख्यात्मक फ़ीडबैक के लिए rating फ़ील्ड जोड़ा गया
    • टेक्स्ट फ़ीडबैक के लिए comment फ़ील्ड जोड़ा गया

एजेंट कॉन्फ़िगरेशन

  • एजेंट विजेट प्राप्त करें
    • कॉल-एंड फ़ीडबैक कलेक्शन कॉन्फ़िगर करने के लिए WidgetEndFeedbackConfig के साथ end_feedback फ़ील्ड जोड़ा गया
    • फ़ीडबैक फ़ॉर्म में वैकल्पिक रेटिंग और टिप्पणी फ़ील्ड समर्थित हैं
  • एजेंट प्राप्त करें & एजेंट अपडेट करें
    • नए प्लेटफ़ॉर्म कॉन्फ़िगरेशन विकल्प शामिल करने के लिए response schema अपडेट किया गया
    • अतिरिक्त सेटिंग्स फ़ील्ड के साथ request schema बेहतर किया गया

टर्न और बातचीत कॉन्फ़िगरेशन

  • एजेंट बनाएँ, बातचीत सिम्युलेट करें, बातचीत स्ट्रीम सिम्युलेट करें

    • बातचीत के दौरान विराम व्यवहार नियंत्रित करने के लिए soft_timeout_config फ़ील्ड जोड़ा गया
    • TurnConfigOverride और TurnConfigOverrideConfig के ज़रिए turn कॉन्फ़िगरेशन overrides जोड़े गए
    • शुरुआती रिस्पॉन्स टाइमिंग नियंत्रित करने के लिए TurnConfig में initial_wait_time जोड़ा गया
    • कॉन्फ़िगरेशन बातचीत और workflow override स्तरों पर उपलब्ध है

टेस्टिंग

  • एजेंट टेस्ट चलाएँ

    • workflow expression समर्थन के लिए request schema बेहतर किया गया
    • अतिरिक्त टेस्ट परिणाम फ़ील्ड के साथ response schema अपडेट किया गया
  • टेस्ट इनवोकेशन प्राप्त करें

    • रिस्पॉन्स में बेहतर टेस्ट परिणाम डेटा शामिल है
    • workflow expression परिणामों के लिए schema अपडेट किया गया

ElevenCreative Studio

  • प्रोजेक्ट प्राप्त करें

    • वीडियो और बाहरी ऑडियो रेफरेंस वाला assets फ़ील्ड (अनिवार्य) जोड़ा गया
    • वीडियो एसेट मेटाडेटा के लिए ProjectVideoResponseModel जोड़ा गया
    • बाहरी ऑडियो ट्रैकिंग के लिए ProjectExternalAudioResponseModel जोड़ा गया
    • वीडियो थंबनेल के लिए ProjectVideoThumbnailSheetResponseModel जोड़ा गया
  • प्रोजेक्ट स्नैपशॉट प्राप्त करें

    • नए ProjectSnapshotExtendedResponseModel के साथ रिस्पॉन्स को फिर से संरचित किया गया
    • स्नैपशॉट डेटा में audio_duration_secs फ़ील्ड (अनिवार्य) जोड़ा गया
    • ProjectSnapshotResponseModel से character_alignments हटाया गया
    • स्नैपशॉट कलेक्शन के लिए ProjectSnapshotsResponseModel जोड़ा गया

बिलिंग

  • सब्सक्रिप्शन प्राप्त करें
    • DiscountResponseModel entries वाला discounts array (अनिवार्य) जोड़ा गया
    • discount_percent_off फ़ील्ड हटाने के लिए चिह्नित किया गया है (अभी उपलब्ध है)
    • discount_amount_off फ़ील्ड हटाने के लिए चिह्नित किया गया है (अभी उपलब्ध है)
    • टैक्स से पहले के इनवॉइस कुल के लिए subtotal_cents फ़ील्ड (integer, nullable) जोड़ा गया
    • टैक्स राशि के लिए tax_cents फ़ील्ड (integer, nullable) जोड़ा गया
    • नए डिस्काउंट और कुल फ़ील्ड शामिल करने के लिए इनवॉइस उदाहरण अपडेट किए गए

स्पीच टू टेक्स्ट

टेक्स्ट टू स्पीच

वॉइस प्रबंधन

प्रोफेशनल वॉइस क्लोनिंग (PVC)

भाषा प्रीसेट

  • स्थानीयकृत सॉफ्ट टाइमआउट संदेशों के लिए भाषा प्रीसेट मॉडल में अब soft_timeout_translation फ़ील्ड शामिल है

API इंटीग्रेशन ट्रिगर

  • नया API कलेक्शन रजिस्टर किया गया: convai_api_integration_trigger_connections

हटाए जा रहे फ़ीचर

  • इनवॉइस फ़ील्ड discount_percent_off और discount_amount_off हटाए जा रहे हैं; इसके बजाय discounts array का उपयोग करें