AI voice company ElevenLabs ने 11 नवंबर 2026 को अपने पहले New York Summit में 13 नए products और upgrades लॉन्च कर दिए हैं। AI voice का सबसे बड़ा नाम रही यह company अब voice tool से आगे बढ़कर enterprise platform बनना चाहती है। इस package में नए voice model, meeting app, custom model fine-tuning, agent upgrades और NVIDIA deal शामिल है। CEO Mati Staniszewski के अनुसार कुछ सालों में conversational agents हर enterprise के लिए उतने ही ज़रूरी हो जाएंगे, जितने cloud या payments हैं।
क्या हुआ: Voice Tool से Enterprise Platform
ElevenLabs अब सिर्फ text-to-speech tool नहीं, वह layer बनना चाहता है जिस पर enterprises अपने conversational AI बनाएं। इसीलिए Summit की announcements चार हिस्सों में बंटी हैं, models, agents, workplace app और partner channel। Models में तीन नए voice model, agents में Memory, Routines और Architect, workplace के लिए ElevenAI app, और partners के लिए Partner Program और Marketplace आए हैं। इसका target buyer बड़ी companies हैं, आम consumer नहीं, और इसीलिए इस package का आधा हिस्सा preview, early access या roadmap है, पूरी तरह available product नहीं।
तीन नए Voice Model: Scribe v3, Eleven v4, Eleven Realtime
Summit से पहले वाले महीने में तीन नए voice model ship हुए हैं, कंपनी के अनुसार तीनों independent benchmark में आगे हैं। Scribe v3 एक speech-to-text transcription model है, जो बोली गई बात को text में बदलता है। Eleven v4 एक text-to-speech model है, जो script के tone, pacing और context को पढ़कर expressive आवाज़ देता है। Eleven Realtime एक speech-to-speech model है, जो तेज़ voice agents के लिए बना है, जहां जवाब तुरंत चाहिए। Scribe v3 Medical भी लॉन्च हुआ है, जो healthcare terms के लिए optimize है, और financial services के लिए ऐसा ही model बनाने की योजना है।
Interaction Engine और ElevenAgents Upgrades
ElevenLabs ने Interaction Engine भी unveil किया है, जो voice models और LLMs को एक conversation में orchestrate करने वाला नया system है। हर step पर frontier model ज़रूरी नहीं होता, इसलिए Interaction Engine हर step के लिए सबसे अच्छा voice model और LLM चुनकर performance, reliability और cost balance करता है। यह turn-taking और interruption संभालता है, जब यूजर बीच में बोले तो agent कैसे रुके और कब जवाब दे। Staniszewski के अनुसार Interaction Engine यह सब under the hood संभालता है, ताकि सही outcome मिले, बिना token पर पैसा waste किए। यह अभी preview में है।
ElevenAgents में तीन बड़े upgrades आए हैं। Memory returning customer का पूरा context याद रखती है, जैसे पहले खरीदी गई shirt का size, ताकि दोबारा वही बात न बतानी पड़े। Routines हर conversation से पहले, दौरान और बाद में multi-step काम करता है, जैसे leads process करना और follow-up चलाना। Architect बात करके या type करके agents को build और improve करता है, हर change को draft करके simulation में test करता है, और approval के लिए रोककर रखता है। ये तीनों upgrades मिलकर agents को ज़्यादा personal और proactive बनाते हैं।
Custom Models: अपनी Data पर Fine-Tuning
सबसे बड़ी enterprise announcement custom model fine-tuning है। Select enterprises अब research team के साथ काम करके open-source language models और voice models को अपने live deployment data पर fine-tune कर सकेंगे। Reinforcement learning के ज़रिए business अपने data से model को लगातार refine कर सकेंगे, और customer satisfaction score यानी CSAT या reliability जैसे metrics को improve कर सकेंगे। Staniszewski के अनुसार हर company का अपना RL stack होगा। यह काम आने वाले महीनों में select enterprises के लिए शुरू होगा, कीमत या release date अभी disclose नहीं हुई है, इसलिए यह अभी roadmap item है, product नहीं।
ElevenAI App: Meeting Notes वाला AI Teammate
सबसे तुरंत इस्तेमाल होने वाला announcement ElevenAI app है, जो enterprise teams के लिए AI teammate की तरह काम करता है। यह spoken conversations, जिसमें in-person meetings भी शामिल हैं, को notes, summary और action items में बदल देता है, consent mechanism built-in है, और call के दौरान live assistance भी देता है। ElevenAI के लिए free early access खुल गया है, यानी कोई भी अभी इसे try कर सकता है। यह Claude के नए workplace tools के Meetings feature जैसा workplace app है, पर इसका focus voice पर है, document पर नहीं।
NVIDIA Deal और Partner Program
NVIDIA के साथ partnership भी expand हुई है। NVIDIA का Nemotron 3.5 Super VL model अब ElevenAgents में available है, और ElevenLabs के अनुसार इसने customer-support benchmark tasks को दूसरे leading open model से 70 प्रतिशत कम cost पर पूरा किया है, पर यह company का अपना benchmark है, independently verify नहीं हुआ है। ElevenLabs 15 MW का नया Vera Rubin compute capacity भी add करेगा, और दोनों companies Poland के national e-Health platform के लिए on-premises voice agent पर भी काम करेंगी। ElevenLabs ने 44 देशों में 550 से ज़्यादा partners वाला Partner Program, McKinsey के साथ alliance, और 20 से ज़्यादा partners के agents वाला Marketplace भी लॉन्च किया है। Yahoo का voice assistant और Westgate का front-desk agent पहले से ElevenAgents पर चल रहे हैं।
आम यूजर के लिए इसका मतलब क्या है
आम यूजर पर इन announcements का असर धीरे धीरे दिखेगा। सबसे सीधा फायदा ElevenAI app है, जिसका free early access अभी खुला है, और आप इसे अपनी meetings में try कर सकते हैं। दूसरा फायदा यह है कि जब आप किसी company के support number पर call करेंगे, तो voice agent आपकी पिछली बातें याद रखेगा, और आपको दोबारा वही जानकारी नहीं देनी पड़ेगी। पर इस package का आधा हिस्सा अभी preview या roadmap है, custom models सिर्फ select enterprises को मिलेंगे, और भारत में availability पर कोई अलग announcement नहीं हुई है। मेरे हिसाब से सबसे बड़ी बात यह है कि ElevenLabs अब voice को enterprise infrastructure बनाना चाहता है।
अक्सर पूछे जाने वाले सवाल
ElevenAI क्या है
ElevenAI ElevenLabs का नया workplace app है, जो AI teammate की तरह काम करता है। यह spoken meetings को notes, summary और action items में बदल देता है, और call के दौरान live assistance भी देता है।
ElevenLabs के तीन नए voice model कौन से हैं
Scribe v3 speech-to-text के लिए है, Eleven v4 expressive text-to-speech के लिए है, Eleven Realtime तेज़ speech-to-speech agents के लिए है। Scribe v3 Medical healthcare के लिए भी लॉन्च हुआ है।
Interaction Engine क्या करता है
Interaction Engine एक conversation में voice models और LLMs को orchestrate करता है। यह हर step के लिए सबसे अच्छा model चुनता है, turn-taking और interruption संभालता है, और performance, reliability और cost को balance करता है।
क्या ElevenAI मुफ्त में मिलेगा
ElevenAI के लिए free early access खुल गया है, यानी कोई भी अभी इसे try कर सकता है। Custom model fine-tuning और कुछ enterprise features की कीमत अभी disclose नहीं की गई है।
Custom model किसे मिलेगा
Custom model fine-tuning select enterprises के लिए है, जो ElevenLabs की research team के साथ काम करके अपने live deployment data पर model को refine कर सकेंगे। यह काम आने वाले महीनों में शुरू होगा।
क्या ElevenLabs के agents भारत में काम करेंगे
भारत में availability पर कोई अलग announcement नहीं हुई है। ElevenAI का free early access कोई भी try कर सकता है, पर India-specific rollout अभी साफ नहीं है।