ElevenLabs ने मॉडल अनुकूलन, ElevenAI और साझेदार कार्यक्रम पेश किया

ElevenLabs ने घोषणा की कि 11 नवंबर, 2026 से वह व्यवसायों को लाइव तैनाती से मिले डेटा का उपयोग करके चुने हुए ओपन-सोर्स भाषा मॉडल और अपने वॉइस मॉडल को बेहतर ढंग से अनुकूलित करने में मदद करेगा। इसके साथ ही, न्यूयॉर्क समिट में एक नया ElevenAI कार्यस्थल ऐप और साझेदार कार्यक्रम भी पेश किया गया।

यह पेशकश ElevenLabs को वॉइस जनरेशन और ट्रांसक्रिप्शन से आगे ले जाकर ग्राहक वार्तालापों और कर्मचारियों के कामकाज के प्रबंधन के लिए सॉफ़्टवेयर तक पहुंचाती है। CEO Mati Staniszewski ने कहा कि कुछ ही वर्षों में संवादात्मक एजेंट “हर उद्यम के लिए महत्वपूर्ण बुनियादी ढाँचा बन जाएँगे—क्लाउड या भुगतान सेवाओं जितने ही आवश्यक।” उन्होंने इन उत्पादों को उद्यमों में व्यापक तैनाती की दिशा में एक कदम के रूप में प्रस्तुत किया।

कंपनी-विशिष्ट मॉडल और वार्तालाप का संचालन

ElevenLabs आने वाले महीनों में मॉडल अनुकूलन का काम शुरू करने की योजना बना रहा है। व्यवसाय अपने ग्राहकों और कामकाज के संदर्भ के अनुरूप मॉडल को बेहतर बनाने के लिए इसके शोधकर्ताओं के साथ काम करेंगे और ग्राहक संतुष्टि या विश्वसनीयता जैसे अनुकूलन मापदंड चुनेंगे। चूँकि डेटा वास्तविक तैनाती से आता है, इसलिए बातचीत का डेटा बढ़ने के साथ कंपनियाँ मॉडल को लगातार बेहतर बना सकती हैं; उन्हें केवल किसी सामान्य उद्योग मॉडल पर निर्भर नहीं रहना पड़ता।

ElevenLabs पहले से ही Scribe v3 Medical के ज़रिए उद्योग-विशिष्ट तरीका अपना रहा है। यह स्वास्थ्य सेवा के लिए बनाया गया ट्रांसक्रिप्शन मॉडल है, जिसे विशिष्ट शब्दावली पहचानने के लिए तैयार किया गया है। Staniszewski ने कहा कि वित्तीय सेवा क्षेत्र के लिए क्षेत्र-विशेष के अनुरूप अनुकूलित मॉडल भी विकसित किया जा रहा है।

प्रदर्शित Interaction Engine एक अलग समस्या का समाधान करता है: यह तय करना कि बातचीत किस तरह आगे बढ़नी चाहिए। यह बारी-बारी से बोलने और बीच में टोकने का प्रबंधन करता है तथा बातचीत के अलग-अलग हिस्सों के लिए अलग भाषा मॉडल चुन सकता है—प्रारंभिक छँटाई के लिए कम लागत वाला मॉडल और जटिल कामों के लिए अत्याधुनिक मॉडल। इस व्यवस्था का उद्देश्य यह है कि सामान्य बातचीत के हर चरण में अत्याधुनिक मॉडल की ज़रूरत न पड़े और टोकन का उपयोग सीमित रहे।

मेमोरी, स्वचालन और ElevenAI ऐप

ElevenLabs के अनुसार, वॉइस और चैट एजेंट तैनात करने वाले उसके प्लेटफ़ॉर्म ElevenAgents में मेमोरी और रूटीन सुविधाएँ जोड़ी जाएँगी। मेमोरी लौटकर आने वाले प्रमाणित ग्राहकों को पहचान सकेगी और हर बातचीत को उनकी पसंद, सीमाओं और आने वाले अवसरों का एक व्यवस्थित रिकॉर्ड बनाएगी; हालाँकि, ग्राहक का प्राथमिक रिकॉर्ड ग्राहक संबंध प्रबंधन प्रणाली में ही रहेगा। उदाहरण के लिए, स्पैनिश बोलना पसंद करने वाले और केवल शाम 5 बजे के बाद बात कर सकने वाले ग्राहक को अगली कॉल पर ये बातें फिर से बताने की ज़रूरत नहीं होगी।

जल्द आने वाली रूटीन सुविधा को बातचीत से पहले, उसके दौरान और बाद में कई चरणों वाले काम स्वचालित करने के लिए बनाया गया है। यह मौजूदा टूल और प्रणालियों से जुड़ सकती है। इसके उदाहरणों में गिरवी ऋण के आवेदक की शुरुआती जाँच करके कुछ ही मिनटों में उसे वापस कॉल करना, मरीजों को मुलाक़ातों की याद दिलाना और प्रतीक्षा सूची में शामिल मरीजों को रद्द हुई मुलाक़ातों के समय देना, रिपोर्ट ईमेल करना, ग्राहक संबंध प्रबंधन प्रणाली में जानकारी दर्ज करना या कॉल शुरू करना शामिल है। ये सुविधाएँ मिलकर ElevenAgents को केवल पूछताछ का जवाब देने से आगे ले जाती हैं, ताकि वह बातचीत का संदर्भ बनाए रख सके और उससे जुड़े काम भी पूरे कर सके।

कर्मचारियों के लिए Staniszewski ने ElevenAI का पूर्वावलोकन पेश किया—यह ऐसा ऐप है जो आमने-सामने की बैठकों सहित बोली जाने वाली बातचीत सुनता है और नोट्स, सारांश तथा कार्रवाई योग्य बिंदु तैयार करता है। यह तुरंत सहायता भी दे सकता है और लोगों तथा एजेंटों के बीच संदर्भ साझा कर सकता है। ElevenLabs के अनुसार, ऐप बैठक में शामिल लोगों की सहमति से नोट्स तैयार करता है और इसमें सूचना देने तथा सहमति लेने की व्यवस्थाएँ शामिल हैं।

घोषणा के साथ ElevenAI का शुरुआती ऐक्सेस निःशुल्क उपलब्ध कराया गया। डिक्टेशन और बैठक के नोट्स के लिए Scribe v3 का उपयोग होता है, जिसे ElevenLabs रिकॉर्ड की गई ऑडियो के ट्रांसक्रिप्शन के लिए अपना मॉडल बताता है और जो 102 भाषाओं को कवर करता है। Scribe v3 Live इसका अलग संस्करण है, जिसे कम विलंबता के साथ वास्तविक समय में ऑडियो संसाधित करने के लिए बनाया गया है।

साझेदार, मार्केटप्लेस और NVIDIA का बुनियादी ढाँचा

ElevenLabs के अनुसार, उसके 44 देशों में 550 से अधिक साझेदार हैं, जिनमें Google Cloud, IBM, Deloitte, DXC और Genesys शामिल हैं। नया साझेदार कार्यक्रम परामर्श कंपनियों, सिस्टम इंटीग्रेटरों, सॉफ़्टवेयर विक्रेताओं और एजेंसियों को उद्यमों के प्रौद्योगिकी ढाँचों में ElevenAgents जोड़ने या जटिल तैनाती पर ElevenLabs के तैनाती-केंद्रित इंजीनियरों के साथ काम करने की सुविधा देता है। McKinsey और QuantumBlack, AI by McKinsey के साथ गठबंधन में इस प्लेटफ़ॉर्म को McKinsey के उद्यम-परिवर्तन संबंधी काम के साथ जोड़ा गया है।

इसके साथ शुरू किए गए मार्केटप्लेस में शुरुआत में स्वास्थ्य सेवा, वित्तीय सेवाओं, बीमा, शिक्षा और खुदरा क्षेत्र के लिए साझेदारों द्वारा बनाए गए ऐप का चुनिंदा संग्रह उपलब्ध है। उद्यम इन ऐप को देख सकते हैं और उनके डेवलपर से संपर्क कर सकते हैं; ElevenLabs के साथ पहले से की गई प्रतिबद्धताओं के तहत इन ऐप की खरीद 2027 में शुरू करने की योजना है।

ElevenLabs और NVIDIA ने घोषणा की कि Nemotron 3.5 Super VL, ElevenAgents में उपलब्ध है और ElevenLabs अपने मौजूदा Blackwell Ultra सिस्टमों के अतिरिक्त NVIDIA Vera Rubin की 15 मेगावाट कंप्यूट क्षमता जोड़ने की योजना बना रहा है। इस अतिरिक्त क्षमता का उद्देश्य सुरक्षा या डेटा-रेज़िडेंसी संबंधी आवश्यकताओं वाली बड़ी तैनातियों को सहारा देना और ElevenLabs के शोधकर्ताओं को अनुकूलित कंप्यूट संसाधनों तक पहुँच देना है।

विस्तारित सहयोग में पोलैंड के राष्ट्रीय ई-हेल्थ प्लेटफ़ॉर्म की केंद्रीय अपॉइंटमेंट प्रणाली Centralna e-Rejestracja के लिए ऑन-प्रिमाइसेस वॉइस एजेंट भी शामिल है। इसकी डिलीवरी में EasyCall सहायता कर रहा है। यह एजेंट उन मरीज़ों को कॉल करता है जिनके पास केवल लैंडलाइन फ़ोन हैं, ताकि उन्हें अपॉइंटमेंट की याद दिला सके और उसे नए समय पर तय करने में मदद कर सके। ElevenLabs के अनुसार, केंद्रीय प्रणाली सालाना 40 मिलियन अपॉइंटमेंट संभालती है और इसमें अनुपस्थित रहने की दर 10% से 20% तक है। इस तैनाती में NVIDIA Confidential Computing का उपयोग किया जाता है, ताकि नागरिकों का डेटा और ऑडियो सरकारी बुनियादी ढाँचे के भीतर रहें और प्रोसेसिंग के दौरान सुरक्षित रहें।

Summit पैकेज से ElevenLabs की एंटरप्राइज़ रणनीति केवल मॉडल के प्रदर्शन पर निर्भर नहीं रहती: ट्यूनिंग और Memory, वास्तविक उपयोग के दौरान जमा हुए डेटा का लाभ उठाते हैं; Routines बातचीत को कारोबारी प्रणालियों से जोड़ता है; और साझेदार कार्यक्रम तथा Marketplace, उद्यमों तक पहुँचने के रास्ते बनाते हैं। इसलिए कार्यान्वयन की मुख्य चुनौती दोहरी है: पूर्वावलोकन और शुरुआती पहुँच वाले उत्पादों को व्यापक उत्पादन उपयोग तक पहुँचाना, और मौजूदा ElevenLabs प्रतिबद्धताओं के ज़रिए Marketplace पर ब्राउज़िंग से खरीदारी तक की प्रक्रिया को आगे बढ़ाना।