Speech Engine पेश है
ElevenLabs Speech Engine आपके अपने चैट एजेंट या LLM में रीयल-टाइम वॉइस जोड़ता है। ElevenLabs स्पीच टू टेक्स्ट, टर्न-टेकिंग, टेक्स्ट टू स्पीच और ब्राउज़र प्लेबैक संभालता है, जबकि आपका सर्वर एजेंट लॉजिक का मालिक होता है और Speech Engine WebSocket पर रिस्पॉन्स टेक्स्ट स्ट्रीम करता है। इसे तब इस्तेमाल करें, जब आपको पूरी तरह होस्ट किए गए ElevenAgents कॉन्फ़िगरेशन के बजाय कस्टम रनटाइम पर वॉइस चाहिए।
ElevenAgents
- टेक्स्ट व्यवहार ओवरराइड्स:
text_behavior_overridesजोड़ा गया है, जो वैकल्पिकverbosity,output_formatऔरinteraction_budgetफ़ील्ड वालेBehaviorOverrideऑब्जेक्ट्स का प्रति-ConversationInitiationSourceमैप है, ताकि चैनल-विशिष्ट एजेंट व्यवहार सेट किया जा सके। - इंटीग्रेशन सोर्स: Intercom, Telegram और Freshdesk जोड़े गए हैं।
- OTLP कन्वर्सेशन ट्रेसेस: कन्वर्सेशन विवरण पाएं अब वैकल्पिक
formatक्वेरी पैरामीटर स्वीकार करता है। स्टैंडर्ड कन्वर्सेशन पेलोड के साथ OTLP-संगत ट्रेस डेटा पाने के लिएformat=otlp_tracesसेट करें। - ASR कीवर्ड ओवरराइड्स: वैकल्पिक
keywordsऐरे वालेASRConversationalConfigOverrideऔरASRConversationalConfigOverrideConfigस्कीमा जोड़े गए हैं, जिन्हें कन्वर्सेशन कॉन्फ़िग क्लाइंट ओवरराइड मॉडल्स में जोड़ा गया है। - वेबहुक ऑथ मेटाडेटा: वेबहुक टूल कॉन्फ़िगरेशन स्कीमा अब वैकल्पिक
auth_resolved_params(स्ट्रिंग ऐरे) दिखाते हैं, जो ऑथ कनेक्शन से रिज़ॉल्व किए गए URL प्लेसहोल्डर्स का दस्तावेज़ीकरण करता है।
म्यूज़िक
- जनरेशन मोड:
MusicGenerationMode(track,loop,ambience) और म्यूज़िक प्रॉम्प्ट रिक्वेस्ट बॉडी में वैकल्पिकgeneration_modeफ़ील्ड जोड़ी गई है। - वीडियो से म्यूज़िक मॉडल: वीडियो से म्यूज़िक (
POST /v1/music/video-to-music) अब वैकल्पिकmodel_id(स्ट्रिंग, डिफ़ॉल्टmusic_v1) स्वीकार करता है।
ElevenCreative Studio
- कन्वर्ज़न क्रेडिट्स: चैप्टर और वॉइस कन्वर्ज़न स्टैटिस्टिक्स रिस्पॉन्स मॉडल्स में अब वैकल्पिक
credits_needed_to_convert(इंटीजर) शामिल है, जो कन्वर्ज़न से पहले आवश्यक क्रेडिट्स बताता है।
वर्कस्पेसेस
- रिसोर्स टाइप्स:
WorkspaceResourceTypeमेंstudio_projectsजोड़ा गया है।
SDK रिलीज़
Python SDK
- v2.50.0 - 25 मई, 2026 के API स्कीमा के लिए SDK फिर से जनरेट किया गया।
- v2.49.1 - पूरे रिस्पॉन्स ऑब्जेक्ट को लौटाने के लिए Speech Engine API कॉल्स अपडेट किए गए।
- v2.49.0 - 18–25 मई, 2026 के API स्कीमा के लिए SDK फिर से जनरेट किया गया, जिसमें ElevenAgents टेक्स्ट व्यवहार ओवरराइड्स, म्यूज़िक
generation_modeऔर वर्कस्पेसstudio_projectsशामिल हैं।
JavaScript SDK
- v2.50.0 - अनुपस्थित Music API मेथड्स और टेस्ट्स जोड़े गए, और 25 मई, 2026 के API स्कीमा के लिए SDK फिर से जनरेट किया गया।
- v2.49.1 - पूरे रिस्पॉन्स ऑब्जेक्ट को लौटाने के लिए Speech Engine API कॉल्स अपडेट किए गए।
- v2.49.0 - 18–25 मई, 2026 के API स्कीमा के लिए SDK फिर से जनरेट किया गया, जिसमें ElevenAgents टेक्स्ट व्यवहार ओवरराइड्स, म्यूज़िक
generation_modeऔर वर्कस्पेसstudio_projectsशामिल हैं।
पैकेजेस
- @elevenlabs/client@1.8.1 - पहले यूज़र जेस्चर पर
AudioContextअनलॉक करके और ऑडियो वर्कलेट लोड होने के बाद प्लेबैक ग्राफ को प्राइम करके, WebSocket वॉइस सेशंस में iOS Safari द्वारा पहला एजेंट मैसेज छोड़ देने की समस्या ठीक की गई। - @elevenlabs/convai-widget-core@0.12.8 और @elevenlabs/convai-widget-embed@0.12.8 -
strip_audio_tagsबंद होने पर वॉइस ट्रांसक्रिप्ट्स में इमोशन और ऑडियो टैग्स को स्टाइल करें, और टॉप-लेवलterms_htmlयाterms_textके null होने को नियम और शर्तों के मोडल के लिए किल स्विच मानें। - @elevenlabs/convai-widget-core@0.12.7 और @elevenlabs/convai-widget-embed@0.12.7 - विजेट डिपेंडेंसीज़ को
@elevenlabs/client@1.8.1पर अपडेट किया गया।
API
API बदलाव देखें
अपडेट किए गए एंडपॉइंट्स और स्कीमा
ElevenAgents
- कन्वर्सेशन विवरण पाएं -
GET /v1/convai/conversations/{conversation_id}- वैकल्पिक
formatक्वेरी पैरामीटर जोड़ा गया;otlp_tracesOTLP-संगत ट्रेस डेटा लौटाता है
- वैकल्पिक
- एजेंट कॉन्फ़िगरेशन स्कीमा
BehaviorOverrideवैल्यूज़ (verbosity,output_format,interaction_budget) के साथConversationInitiationSourceद्वारा की गईtext_behavior_overridesमैपिंग जोड़ी गई
ConversationInitiationSourceएनमintercom_integration,telegram_integrationऔरfreshdesk_integrationजोड़े गए
- ASR ओवरराइड स्कीमा
- वैकल्पिक
keywords(स्ट्रिंग्स का ऐरे) के साथASRConversationalConfigOverrideऔरASRConversationalConfigOverrideConfigजोड़े गए
- वैकल्पिक
- वेबहुक टूल स्कीमा
- वेबहुक कॉन्फ़िगरेशन मॉडल्स में वैकल्पिक
auth_resolved_params(स्ट्रिंग ऐरे) जोड़ा गया
- वेबहुक कॉन्फ़िगरेशन मॉडल्स में वैकल्पिक
म्यूज़िक
- वीडियो से म्यूज़िक -
POST /v1/music/video-to-music- वैकल्पिक
model_id(स्ट्रिंग, डिफ़ॉल्टmusic_v1) जोड़ा गया
- वैकल्पिक
- म्यूज़िक प्रॉम्प्ट रिक्वेस्ट स्कीमा
MusicGenerationMode(track,loop,ambience) को संदर्भित करने वाला वैकल्पिकgeneration_modeजोड़ा गया
ElevenCreative Studio
- चैप्टर और वॉइस कन्वर्ज़न स्टैटिस्टिक्स स्कीमा
- वैकल्पिक
credits_needed_to_convert(इंटीजर) जोड़ा गया
- वैकल्पिक
वर्कस्पेसेस
WorkspaceResourceTypeएनमstudio_projectsजोड़ा गया