ElevenLabs esittelee mallien mukauttamisen, ElevenAI:n ja kumppaniohjelman

ElevenLabs ilmoitti 11. marraskuuta 2026 auttavansa yrityksiä hienosäätämään valikoituja avoimen lähdekoodin kielimalleja ja omia äänimallejaan todellisissa käyttöönottoympäristöissä kerätyn datan avulla. Lisäksi yhtiö esitteli New York Summitissa uuden työntekijöille suunnatun ElevenAI-sovelluksen ja kumppaniohjelman.

Tuotekokonaisuus laajentaa ElevenLabsin toimintaa puheentuotannosta ja litteroinnista asiakaskeskustelujen hallintaan ja työntekijöiden työn tukemiseen tarkoitettuihin ohjelmistoihin. Toimitusjohtaja Mati Staniszewski sanoi keskustelupohjaisten agenttien olevan muutaman vuoden kuluessa ”jokaisen yrityksen kriittistä infrastruktuuria, yhtä välttämätöntä kuin pilvipalvelut tai maksuliikenne”. Hän kuvaili tuotteita osaksi laajempaa pyrkimystä ottaa niitä käyttöön yrityksissä.

Yrityskohtaiset mallit ja keskustelujen reititys

ElevenLabs aikoo aloittaa mallien mukauttamisen lähikuukausina. Yritykset tekevät sen tutkijoiden kanssa yhteistyötä ja hienosäätävät malleja omille asiakkailleen ja toimintaympäristöönsä sopiviksi. Ne voivat valita optimointimittareiksi esimerkiksi asiakastyytyväisyyden tai luotettavuuden. Koska data kertyy todellisista käyttöönotoista, yritykset voivat kehittää malleja edelleen vuorovaikutustilanteiden lisääntyessä sen sijaan, että ne turvautuisivat vain yleiseen toimialamalliin.

ElevenLabs soveltaa jo toimialakohtaista lähestymistapaa Scribe v3 Medical -mallissa, joka on terveydenhuollon litterointimalli ja tunnistaa erikoisterminologiaa. Staniszewskin mukaan kehitteillä on myös rahoituspalveluihin optimoitu toimialamalli.

Esitelty Interaction Engine ratkaisee toisenlaista ongelmaa: se määrittää, miten keskustelun tulisi edetä. Se hallitsee puheenvuorojen vaihtumista ja keskeytyksiä sekä voi osoittaa keskustelun eri osiin eri kielimalleja: yksinkertaisempaan alkukartoitukseen edullisemman mallin ja monimutkaisiin tehtäviin huipputason mallin. Näin rutiininomaisissa keskusteluissa ei tarvitse käyttää huipputason mallia joka vaiheessa, ja ratkaisun tarkoituksena on vähentää tokenien käyttöä.

Muisti, automatisointi ja ElevenAI-sovellus

ElevenLabsin mukaan sen ääni- ja chat-agenttien käyttöönottoon tarkoitettu ElevenAgents-alusta saa Memory- ja Routines-toiminnot. Memory tunnistaa palaavat, tunnistautuneet asiakkaat ja tiivistää jokaisen keskustelun jäsennellyksi kirjaukseksi asiakkaan mieltymyksistä, rajoitteista ja tulevista tilanteista. Asiakkuudenhallintajärjestelmä säilyy kuitenkin asiakkaan ensisijaisena tietueena. Esimerkiksi espanjaa puhuva asiakas, joka voi keskustella vain kello 17:n jälkeen, ei joudu toistamaan näitä tietoja seuraavalla puhelulla.

Myöhemmin käyttöön tuleva Routines on suunniteltu automatisoimaan monivaiheisia tehtäviä ennen keskusteluja, niiden aikana ja niiden jälkeen sekä yhdistymään olemassa oleviin työkaluihin ja järjestelmiin. Esimerkkejä ovat asuntolainaa hakevan asiakkaan esikarsinta ja takaisinsoitto muutaman minuutin kuluessa, potilaiden muistuttaminen vastaanottokäynneistä ja peruutusaikojen tarjoaminen jonotuslistalla oleville potilaille, raporttien lähettäminen sähköpostitse, tietojen kirjaaminen asiakkuudenhallintajärjestelmään sekä puheluiden soittaminen. Yhdessä nämä toiminnot vievät ElevenAgentsia kysymyksiin vastaamisesta kohti keskustelujen kontekstin säilyttämistä ja niihin liittyvien tehtävien hoitamista.

Työntekijöille Staniszewski esitteli ElevenAI-sovelluksen, joka kuuntelee puhetilanteita, myös kasvokkain käytäviä kokouksia, ja tuottaa muistiinpanoja, yhteenvetoja ja tehtävälistoja. Se voi myös tarjota apua reaaliajassa ja välittää kontekstia ihmisten ja agenttien välillä. ElevenLabsin mukaan sovellus tekee kokousmuistiinpanot osallistujien suostumuksella ja sisältää ilmoitus- ja suostumusmekanismit.

ElevenAI:n maksuton ennakkokäyttö alkoi julkistuksen yhteydessä. Sanelussa ja kokousmuistiinpanoissa käytetään Scribe v3 -mallia, jota ElevenLabs kuvailee tallenteiden litterointimallikseen ja joka kattaa 102 kieltä. Erillinen Scribe v3 Live -versio on suunniteltu äänen käsittelyyn reaaliajassa ja pienellä viiveellä.

Kumppanit, markkinapaikka ja NVIDIA-infrastruktuuri

ElevenLabsin mukaan sillä on yli 550 kumppania 44 maassa. Niihin kuuluvat Google Cloud, IBM, Deloitte, DXC ja Genesys. Uusi kumppaniohjelma antaa konsulttiyrityksille, järjestelmäintegraattoreille, ohjelmistotoimittajille ja toimistoille mahdollisuuden integroida ElevenAgentsin yritysten teknologiapinoihin tai tehdä yhteistyötä ElevenLabsin asiakaskohteisiin sijoitettujen insinöörien kanssa vaativissa käyttöönotoissa. McKinseyn ja QuantumBlack, AI by McKinseyn kanssa solmitussa kumppanuudessa alusta yhdistetään McKinseyn yritysten muutoshankkeisiin.

Samassa yhteydessä avatussa markkinapaikassa on aluksi kuratoitu valikoima kumppaneiden kehittämiä sovelluksia terveydenhuollon, rahoituspalvelujen, vakuutusalan, koulutuksen ja vähittäiskaupan tarpeisiin. Yritykset voivat selata sovelluksia ja ottaa yhteyttä niiden kehittäjiin. Ostojen tekemisen ElevenLabsin nykyisten sopimusten puitteissa on määrä alkaa vuonna 2027.

ElevenLabs ja NVIDIA ilmoittivat, että Nemotron 3.5 Super VL on saatavilla ElevenAgentsissa ja että ElevenLabs aikoo lisätä 15 MW NVIDIA Vera Rubin -laskentakapasiteettia nykyisten Blackwell Ultra -järjestelmiensä lisäksi. Lisäkapasiteetti on tarkoitettu laajoihin käyttöönottoihin, joissa on tietoturvaan tai tietojen sijaintiin liittyviä vaatimuksia, ja se antaa ElevenLabsin tutkijoille käyttöön optimoitua laskentakapasiteettia.

Laajennettu yhteistyö kattaa myös paikalliseen infrastruktuuriin asennettavan puheagentin Centralna e-Rejestracja -järjestelmälle, joka on Puolan kansallisen sähköisen terveydenhuollon alustan keskitetty ajanvarausjärjestelmä. EasyCall tukee ratkaisun käyttöönottoa. Agentti soittaa potilaille, joilla on käytössään vain lankapuhelin, muistuttaa heitä ajanvarauksista ja auttaa siirtämään niitä. ElevenLabsin mukaan keskitetty järjestelmä käsittelee vuosittain 40 miljoonaa ajanvarausta, ja poisjäämisaste on 10–20 prosenttia. Käyttöönotossa hyödynnetään NVIDIA Confidential Computing -tekniikkaa, jotta kansalaisten tiedot ja äänitallenteet pysyvät valtionhallinnon infrastruktuurissa ja suojattuina käsittelyn aikana.

Summit-kokonaisuuden myötä ElevenLabsin yritysstrategia nojaa muuhunkin kuin mallien suorituskykyyn: mallien hienosäätö ja Memory hyödyntävät käytössä kertynyttä dataa, Routines yhdistää keskustelut liiketoimintajärjestelmiin, ja kumppaniohjelma sekä Marketplace tarjoavat väyliä yritysasiakkaiden luo. Keskeinen toteutushaaste on siten kaksijakoinen: esikatselussa ja ennakkokäytössä olevien tuotteiden saattaminen laajempaan tuotantokäyttöön sekä Marketplace-selailun edistäminen ostotapahtumiksi nykyisten ElevenLabs-sitoumusten kautta.