AI के लिए इंटरैक्शन लेयर बनाना: ElevenLabs Summit NYC में हुई हर घोषणा

AI पहले से कहीं ज़्यादा सक्षम है, लेकिन इस बुद्धिमत्ता को व्यापक रूप से सुलभ बनाने के लिए सिस्टम का हर किसी के लिए समझना और इस्तेमाल करना आसान होना चाहिए। यह इस बात पर निर्भर करता है कि ये इंटरैक्शन स्वाभाविक और सहज महसूस हों। ElevenLabs, AI के लिए वही इंटरैक्शन लेयर बना रहा है।

आज न्यूयॉर्क में आयोजित अपने समिट में, ElevenLabs ने नए मॉडल, एजेंट और डिप्लॉयमेंट विकल्प पेश किए, जो बिज़नेस को AI के ज़रिए लोगों से जुड़ने और कमाई के नए तरीके खोजने में मदद करेंगे।

ElevenLabs के सीईओ और सह-संस्थापक माती स्टानिशेव्स्की ने कहा, “कुछ ही वर्षों में कन्वर्सेशनल एजेंट हर एंटरप्राइज़ के लिए महत्वपूर्ण इंफ्रास्ट्रक्चर बन जाएंगे—क्लाउड या पेमेंट्स जितने ही ज़रूरी। हर बिज़नेस को ग्राहकों, कर्मचारियों और व्यापक दुनिया के साथ इंटरैक्ट करने का तरीका फिर से बनाना होगा।”

समिट में ElevenLabs ने ये घोषणाएं कीं:

हर इंटरैक्शन को शक्ति देने वाले मॉडलों में प्रगति

हमने वॉइस से शुरुआत की और स्वाभाविक बातचीत के लिए इंडस्ट्री के अग्रणी मॉडल बनाए। अब हमारा काम उन मॉडलों और टूल्स तक बढ़ रहा है, जो लोगों के टेक्नोलॉजी से इंटरैक्ट करने के हर तरीके को शक्ति देते हैं।

मंच पर स्टानिशेव्स्की ने कई अपडेट्स का प्रीव्यू दिया, जो AI सिस्टम, ग्राहकों और कर्मचारियों के बीच इंटरैक्शन को अधिक स्वाभाविक और स्थिति के ज़्यादा अनुकूल बनाएंगे। उन्होंने कहा, “ElevenLabs में हमारा मिशन इंसान और टेक्नोलॉजी के बीच के इंटरैक्शन को हल करना है, और पहली बार इसे हल करना संभव हुआ है।”

अपने डोमेन के लिए ओपन-सोर्स मॉडल और ElevenLabs वॉइस मॉडल को फाइन-ट्यून करें

हर इंडस्ट्री की अपनी भाषा और नियम होते हैं। आप ग्राहकों को कैसे सेवा देते हैं और उस बातचीत के लिए सबसे अच्छा चैनल क्या है, यह हर इंडस्ट्री में अलग होता है। इसलिए ElevenLabs ने प्रमुख इंडस्ट्रीज़ के लिए समर्पित मॉडल बनाने पर काम किया है। डोमेन-विशिष्ट स्पीच टू टेक्स्ट मॉडल उन शब्दों को सीखते हैं जिनका बिज़नेस वास्तव में अपनी इंडस्ट्री में इस्तेमाल करता है, जैसे फाइनेंस में EBITDA या सरकारी क्षेत्र में HIPAA। ElevenLabs ने इसी तरीके से हेल्थकेयर के लिए ट्रांसक्रिप्शन मॉडल Scribe v3 Medical बनाया। यह हज़ारों जटिल मेडिकल शब्दों को कहीं अधिक सटीकता से पहचान सकता है और cycloserine व cyclosporine जैसी दवाओं के नामों में फर्क भी समझता है, ताकि मरीज़ को इम्यूनोसप्रेसेंट नहीं, तपेदिक का इलाज मिले।

यह काम धीमा नहीं पड़ने वाला है, और स्टानिशेव्स्की ने कहा कि वित्तीय सेवाओं की इंडस्ट्री के लिए डोमेन-ऑप्टिमाइज़्ड मॉडल तैयार किया जा रहा है। लेकिन हमारा यह भी मानना है कि बिज़नेस अपने इस्तेमाल के मॉडल को सिर्फ़ इंडस्ट्री के लिए नहीं, बल्कि अपने खास संदर्भ और ग्राहकों के लिए भी बेहतर बना सकें।

कीनोट में स्टानिशेव्स्की ने घोषणा की कि आने वाले महीनों में हम बिज़नेस को कुछ ओपन-सोर्स लैंग्वेज मॉडल और ElevenLabs वॉइस मॉडल को अपने उपयोग के लिए फाइन-ट्यून करने में मदद करेंगे। उन्होंने कहा, “लोगों और बिज़नेस को अलग बनाने वाली बातों को शामिल किए बिना हम इंसान-AI इंटरैक्शन को हल नहीं कर सकते।”

टीम्स उन खास बारीकियों के लिए मॉडल फाइन-ट्यून कर सकेंगी जो उनकी कंपनी को अलग बनाती हैं। बिज़नेस अपने लाइव डिप्लॉयमेंट से डेटा ला सकते हैं और उन्हें शक्ति देने वाले मॉडल को बेहतर बनाने के लिए ElevenLabs के शोधकर्ताओं के साथ काम कर सकते हैं। हर बिज़नेस उन मेट्रिक्स को चुन सकता है जो उसके लिए अहम हैं, जैसे कस्टमर सैटिस्फैक्शन स्कोर (CSAT) या विश्वसनीयता। ElevenLabs के शोधकर्ता आपके लाइव डिप्लॉयमेंट के डेटा से इन मॉडलों को फाइन-ट्यून करने में मदद करेंगे। हर नए इंटरैक्शन के आधार पर आप लगातार ऑप्टिमाइज़ कर सकते हैं; स्टानिशेव्स्की ने इसकी तुलना हर कंपनी के अपने रीइन्फोर्समेंट-लर्निंग स्टैक से की।

स्टानिशेव्स्की ने कहा, “हम यह सुनिश्चित करने के लिए और डोमेन-ऑप्टिमाइज़्ड मॉडल जारी करते रहेंगे कि आपका AI अधिक सटीक और उपयोगी हो, लेकिन हमारा यह भी मानना है कि बिज़नेस को सिर्फ़ अपनी इंडस्ट्री के लिए नहीं, बल्कि अपनी कंपनी और ग्राहकों के लिए बेहतर बनाए गए मॉडलों के साथ और आगे बढ़ने में सक्षम होना चाहिए। यह आपके डेटा को आपके लिए काम में लाने और अपनी खास बढ़त को आगे बढ़ाने के सबसे अच्छे तरीकों में से एक है।”

Interaction Engine पूरी बातचीत को ऑर्केस्ट्रेट करता है

हर एजेंटिक काम को सफल होने के लिए हर चरण पर फ्रंटियर मॉडल की ज़रूरत नहीं होती। किसी खास नतीजे के लिए कौन-से मॉडल इस्तेमाल करने हैं, कैसे और कब इस्तेमाल करने हैं, यह अपने आप में एक कला है—और ElevenLabs के शोधकर्ता इसे हल करने पर काम कर रहे हैं।

ElevenLabs ने Interaction Engine नाम के एक नए सिस्टम का प्रीव्यू दिया, जो बातचीत की लय से शुरू होता है। यह बारी लेने और बीच में टोकने की स्थितियां संभालता है, ताकि एजेंट को पता हो कि कब बोलना है और कब रुकना है। यह बातचीत के हर हिस्से के लिए सही LLM भी चुन सकता है। एक कम लागत वाला मॉडल ट्रायेज संभालकर टोकन के इस्तेमाल को नियंत्रित रख सकता है, और ज़रूरत पड़ने पर जटिल कामों के लिए फ्रंटियर मॉडल सक्रिय हो जाता है।

ElevenAgents में बड़े अपग्रेड और भी बहुत कुछ

ElevenAgents, सेल्स, सपोर्ट, रिक्रूटमेंट और ऑपरेशंस में वॉइस और चैट एजेंट को कॉन्फ़िगर, डिप्लॉय और बेहतर बनाने का प्लेटफ़ॉर्म है। यह समझता है कि वह किससे बात कर रहा है और उनकी ज़रूरत के अनुसार ढल जाता है।

Yahoo, Westgate और KPN जैसे ग्राहक और पार्टनर पहले ही ElevenAgents का इस्तेमाल कर रहे हैं और देख रहे हैं कि संदर्भ और संस्कृति को बेहतर समझने वाले एजेंट सभी के लिए बेहतर नतीजे देते हैं।

स्टानिशेव्स्की ने ElevenAgents में आने वाले कई अपडेट्स साझा किए, जो एजेंट और ग्राहकों के बीच इंटरैक्शन को और सहज व स्वाभाविक बनाएंगे।

Memory, ElevenAgents को लौटकर आने वाले ग्राहकों को याद रखने में मदद करती है

कस्टमर सपोर्ट बातचीत में लोग अक्सर अहम जानकारी साझा करते हैं, जिसे दर्ज नहीं किया जाता या उस पर कार्रवाई नहीं होती। स्टानिशेव्स्की ने कहा, “किसी व्यक्ति के साथ बेहतरीन बातचीत की एक पहचान यह है कि वे आपकी कही बातें याद रखते हैं और उन पर कार्रवाई करते हैं। एजेंट को भी ऐसा ही करना चाहिए।”

Memory, ElevenAgents एजेंट को समय के साथ ग्राहक का रिकॉर्ड बनाने देगी—वापस आने वाले प्रमाणित ग्राहक को पहचानते हुए और उनकी पिछली बातों को याद रखते हुए। CRM मुख्य ग्राहक रिकॉर्ड बना रहेगा, लेकिन Memory बातचीत में साझा वे विवरण दर्ज करती है जिनके लिए कभी कोई फ़ील्ड नहीं था, जैसे पसंद, सीमाएं और आने वाले अवसर। अगर कोई ग्राहक स्पैनिश पसंद करता है और शाम 5 बजे के बाद ही बात कर सकता है, तो एजेंट इसे याद रखता है और उसी के अनुसार काम करता है।

हर इंटरैक्शन के बाद एजेंट बातचीत को एक व्यवस्थित रिकॉर्ड में बदलता है और ग्राहक के लौटने पर उसे अपडेट करता है। यह उन विवरणों को भी संभालकर रखता है जो बाद में अहम होते हैं। मार्च में घर बदलने का ज़िक्र करने वाले फ़ोन सब्सक्राइबर को अप्रैल में कॉल करने पर इसे दोबारा बताने की ज़रूरत नहीं होती: एजेंट अपने-आप पूछ लेता है कि क्या वह सेवा नए पते पर ट्रांसफ़र करना चाहता है, और पुराने पते की सेवा बंद कर देता है। नतीजा हर ग्राहक की ऐसी समझ है जो हर बातचीत के साथ बढ़ती जाती है, ताकि हर इंटरैक्शन पिछले से ज़्यादा व्यक्तिगत महसूस हो।

Routines बातचीत के इर्द-गिर्द होने वाला काम संभालती हैं

कस्टमर सपोर्ट कॉल के लिए ज़्यादातर फॉलो-अप काम कॉल खत्म होने के बाद होता है। अक्सर इसे ऐसे लोग और टूल्स करते हैं जो मूल बातचीत का हिस्सा नहीं थे। ElevenAgents की नई ऑटोमेशन लेयर Routines, यूज़र्स को हर बातचीत से पहले, उसके दौरान और बाद में कई चरणों वाला काम चलाने देगी। यह आपकी टीम के पहले से इस्तेमाल किए जा रहे टूल्स और सिस्टम से जुड़ती है।

एक Routine, मॉर्गेज आवेदक की पहले जांच कर सकती है और मिनटों में वापस कॉल कर सकती है, या मरीज़ों को अपॉइंटमेंट से पहले याद दिलाकर वेटलिस्ट से खाली हुआ स्लॉट ऑफ़र कर सकती है। इन्हें रिपोर्ट ईमेल करने, CRM में लिखने या कॉल शुरू करने के लिए भी बनाया जा सकता है—यह सब सीधे ElevenAgents में।

Routines के साथ ElevenAgents हर बातचीत से जुड़े ज़्यादा काम संभालता है, ताकि आपकी टीम तैयारी और फॉलो-अप में कम समय और ग्राहकों पर ज़्यादा समय दे सके।

ElevenAI लोगों को अहम बातचीत में पूरी तरह मौजूद रहने में मदद करता है

कीनोट के दौरान एक झलक में, स्टानिशेव्स्की ने ElevenLabs के नए ऐप ElevenAI को पेश किया। यह एंटरप्राइज़ टीम्स के लिए AI टीममेट की तरह काम करता है; यह आमने-सामने की मीटिंग्स सहित बोली गई बातचीत सुनता है और उन्हें नोट्स व अगले कदमों में बदल देता है। अगर ElevenAgents बिज़नेस और ग्राहकों के बीच की इंटरैक्शन लेयर है, तो ElevenAI काम कर रहे कर्मचारियों के लिए वह लेयर होगा।

ElevenAI, ElevenLabs के सबसे नए और सबसे सटीक स्पीच टू टेक्स्ट मॉडल Scribe v3 से संचालित डिक्टेशन और मीटिंग नोट्स देता है। मीटिंग में यह सभी की सहमति से नोट्स लेता है, फिर कॉल खत्म होने पर हर सहभागी को सारांश और एक्शन आइटम देता है। यह कॉल के दौरान संदर्भ साझा करके और लोगों व एजेंट के बीच सहयोग बढ़ाकर लाइव सहायता भी दे सकता है। इसमें सूचना और सहमति की व्यवस्थाएं पहले से मौजूद हैं, ताकि दूसरी तरफ़ के लोग सहज महसूस करें।

जैसे-जैसे लोग अपनी रोज़मर्रा की ज़िंदगी में पर्सनल एजेंट पर अधिक निर्भर होंगे, उन्हें काम पर ऐसे सपोर्ट की ज़रूरत होगी जो कर्मचारियों के लिए बनाया गया हो। ElevenAI कंपनी के टूल्स और प्रक्रियाओं के अनुसार ढलता है और पूरे कार्यदिवस में लोगों के साथ रहता है। यह एजेंट और लोगों के बीच सही संदर्भ भी पहुंचाता है, ताकि दोनों एक टीम की तरह साथ काम कर सकें। ElevenAI का मुफ़्त अर्ली ऐक्सेस आज से शुरू हो रहा है।

ElevenLabs Partner Program और ElevenLabs Marketplace के साथ एंटरप्राइज़ इकोसिस्टम का विस्तार

ElevenLabs का पार्टनर नेटवर्क Google Cloud, IBM, Deloitte, DXC और Genesys सहित 44 देशों में 550 से अधिक पार्टनर्स तक बढ़ गया है। आज हम ElevenLabs Partner Program लॉन्च कर रहे हैं, ताकि एंटरप्राइज़ उन कंसल्टेंसीज़, सिस्टम इंटीग्रेटर्स, सॉफ़्टवेयर वेंडर्स और एजेंसियों के साथ ElevenAgents को आसानी से डिप्लॉय कर सकें जो उनके बिज़नेस को पहले से जानते हैं। पार्टनर आपके मौजूदा टेक स्टैक में इंटीग्रेशन संभालते हैं या जटिल डिप्लॉयमेंट पर ElevenLabs FDEs के साथ काम करते हैं—जो भी आपको सबसे तेज़ी से वैल्यू दिलाए।

इस प्रोग्राम के तहत ElevenLabs, McKinsey के साथ गठजोड़ की भी घोषणा कर रहा है, जिसमें ElevenAgents को फर्म की एंटरप्राइज़ ट्रांसफ़ॉर्मेशन विशेषज्ञता और QuantumBlack, AI by McKinsey के साथ जोड़ा जाएगा। बिज़नेस अब ElevenLabs पर बना सकते हैं, किसी पार्टनर के साथ बना सकते हैं या किसी पार्टनर से खरीदकर जटिल सिस्टम में एजेंट को बड़े स्तर पर लागू कर सकते हैं।

इसके अलावा, ElevenLabs और NVIDIA ने घोषणा की कि वे अपनी साझेदारी का विस्तार कर रहे हैं। Nemotron 3.5 Super VL अब ElevenAgents में उपलब्ध है और ElevenLabs, Vera Rubin की नई कंप्यूट क्षमता में 15 MW भी जोड़ रहा है। दोनों कंपनियां पोलैंड के राष्ट्रीय e-Health प्लेटफ़ॉर्म के लिए एक ऑन-प्रिमाइसेस वॉइस एजेंट पर भी काम करेंगी। यह एजेंट सिर्फ़ लैंडलाइन रखने वाले मरीज़ों के लिए अपॉइंटमेंट शेड्यूल करने में काम करेगा।

आज हम ElevenLabs Marketplace भी पेश कर रहे हैं—हमारे टेक्नोलॉजी पार्टनर्स द्वारा ElevenLabs पर बनाए गए, इंडस्ट्री-विशिष्ट AI और वॉइस ऐप्लिकेशन का क्यूरेटेड समूह। यह हेल्थकेयर, वित्तीय सेवाओं, बीमा, शिक्षा और रिटेल समेत कई इंडस्ट्रीज़ के लिए है। एंटरप्राइज़ एजेंट और ऐप्लिकेशन ब्राउज़ कर सकते हैं और उनके पीछे के पार्टनर्स से सीधे जुड़ सकते हैं। अगले साल से, बिज़नेस अपनी मौजूदा ElevenLabs प्रतिबद्धता का इस्तेमाल करके Marketplace के ज़रिए ये एजेंट खरीद सकेंगे।

जब इंटरैक्शन की समस्या हल हो जाती है, तो क्या होता है

स्टानिशेव्स्की ने कीनोट का समापन यह पूछते हुए किया कि जब लोगों और AI के बीच इंटरैक्शन हल हो जाता है, तो क्या होता है। उनका जवाब ऐसी दुनिया था जहां टेक्नोलॉजी लोगों के अनुसार ढलती है, भाषा, भूगोल और पैमाने की सीमाएं खत्म हो जाती हैं, और स्थानीय बारीकियां व संस्कृति सुरक्षित रहती हैं।

स्टानिशेव्स्की ने कहा, “लोगों को स्वाभाविक रूप से चिंता है कि AI हर चीज़ को केंद्रीकृत और एकरूप बना सकता है। कि बिज़नेस अपनी खास बढ़त की रक्षा नहीं कर पाएंगे। कि AI का हर नया संस्करण औसत स्तर पर लौट जाएगा। हम इसका उलटा बना रहे हैं—मॉडल, प्रोडक्ट्स और एक कम्युनिटी, जो आपके बिज़नेस को अलग बनाने वाली बातों को बढ़ाए और आपकी बढ़त आगे ले जाने में मदद करे।”

आज की घोषणाएं उस भविष्य की ओर कदम हैं और ElevenLabs इसे न्यूयॉर्क में हमारे साथ जुड़ने वाले ग्राहकों, पार्टनर्स और डेवलपर्स के साथ मिलकर बना रहा है। शुरुआत करने के लिए, ElevenAgents से शुरू करें।