ElevenLabs presenta la personalización de modelos, ElevenAI y un programa de socios

ElevenLabs anunció el 11 de noviembre de 2026 que ayudará a las empresas a ajustar modelos de lenguaje de código abierto seleccionados y sus modelos de voz utilizando datos de implementaciones reales. También presentó una nueva aplicación laboral, ElevenAI, y un programa de socios durante su cumbre de Nueva York.

La oferta amplía la actividad de ElevenLabs más allá de la generación de voz y la transcripción, hacia el desarrollo de software para gestionar las conversaciones con los clientes y el trabajo de los empleados. El director ejecutivo, Mati Staniszewski, afirmó que, en unos pocos años, los agentes conversacionales se convertirían en «infraestructura crítica para todas las empresas, tan esencial como la nube o los pagos», y presentó estos productos como parte de una iniciativa más amplia para impulsar su adopción en las empresas.

Modelos personalizados para cada empresa y enrutamiento de conversaciones

ElevenLabs prevé comenzar el trabajo de personalización en los próximos meses. Las empresas trabajarán con sus investigadores para ajustar los modelos a sus propios clientes y a su contexto operativo, y seleccionarán métricas de optimización como la satisfacción del cliente o la fiabilidad. Como los datos proceden de implementaciones reales, las empresas podrán seguir perfeccionando los modelos a medida que se acumulen interacciones, en lugar de depender únicamente de un modelo general del sector.

ElevenLabs ya aplica este enfoque específico para cada sector con Scribe v3 Medical, un modelo de transcripción para el sector sanitario diseñado para reconocer terminología especializada. Staniszewski señaló que también está en desarrollo un modelo optimizado para el ámbito de los servicios financieros.

El Interaction Engine, presentado en una vista previa, aborda otro problema: decidir cómo debe desarrollarse una conversación. Gestiona los turnos de palabra y las interrupciones, y puede asignar distintos modelos de lenguaje a diferentes partes de un intercambio; por ejemplo, utilizar un modelo más económico para la clasificación inicial y uno de vanguardia para las tareas complejas. El diseño evita que los intercambios habituales requieran un modelo de vanguardia en cada paso y busca limitar el uso de tokens.

Memoria, automatización y la aplicación ElevenAI

ElevenLabs afirma que ElevenAgents, su plataforma para implementar agentes de voz y chat, incorporará Memory y Routines. Memory reconocerá a los clientes autenticados que vuelvan a ponerse en contacto con la empresa y resumirá cada conversación en un registro estructurado de sus preferencias, limitaciones y próximas ocasiones relevantes, sin dejar de considerar el sistema de gestión de relaciones con los clientes como el registro principal de clientes. Por ejemplo, un cliente que prefiera hablar en español y solo pueda hacerlo después de las 17:00 no tendrá que repetir esos datos en la siguiente llamada.

Routines, cuya llegada también está prevista próximamente, está diseñada para automatizar tareas de varios pasos antes, durante y después de las conversaciones, conectándose con las herramientas y los sistemas existentes. Entre los ejemplos figuran realizar una evaluación preliminar de una persona que solicita una hipoteca y devolverle la llamada en unos minutos; recordar a los pacientes sus citas y ofrecer los turnos cancelados a quienes estén en lista de espera; enviar informes por correo electrónico; registrar información en un sistema de gestión de relaciones con los clientes; o iniciar llamadas. En conjunto, estas funciones amplían las capacidades de ElevenAgents: además de responder consultas, podrá conservar el contexto y completar las tareas relacionadas con una conversación.

Para los empleados, Staniszewski presentó en una vista previa ElevenAI, una aplicación que escucha conversaciones habladas, incluidas las reuniones presenciales, y genera notas, resúmenes y tareas pendientes. También puede ofrecer asistencia en tiempo real y transferir contexto entre personas y agentes. ElevenLabs afirma que la aplicación toma notas de las reuniones con el consentimiento de los participantes e incluye mecanismos de aviso y consentimiento.

El anuncio coincidió con la apertura del acceso anticipado gratuito a ElevenAI. El dictado y las notas de reuniones utilizan Scribe v3, que ElevenLabs describe como su modelo de transcripción de audio grabado, compatible con 102 idiomas; la variante independiente Scribe v3 Live está diseñada para procesar audio en tiempo real con baja latencia.

Socios, mercado e infraestructura de NVIDIA

ElevenLabs informa que cuenta con más de 550 socios en 44 países, entre ellos Google Cloud, IBM, Deloitte, DXC y Genesys. El nuevo Programa de socios permite a consultoras, integradores de sistemas, proveedores de software y agencias integrar ElevenAgents en las plataformas tecnológicas empresariales o colaborar con los ingenieros de implementación de ElevenLabs en proyectos complejos. Una alianza con McKinsey y QuantumBlack, AI by McKinsey, combina la plataforma con el trabajo de transformación empresarial de McKinsey.

El Marketplace que acompaña esta iniciativa ofrece inicialmente un catálogo seleccionado de aplicaciones desarrolladas por socios para los sectores sanitario, financiero, de seguros, educativo y minorista. Las empresas pueden explorar las aplicaciones y ponerse en contacto con sus desarrolladores; está previsto que las compras mediante los compromisos existentes con ElevenLabs comiencen en 2027.

ElevenLabs y NVIDIA anunciaron que Nemotron 3.5 Super VL está disponible en ElevenAgents y que ElevenLabs planea añadir 15 MW de capacidad de cómputo NVIDIA Vera Rubin a sus sistemas Blackwell Ultra existentes. La capacidad adicional está destinada a implementaciones de gran escala con requisitos de seguridad o residencia de datos, y permitirá a los investigadores de ElevenLabs acceder a recursos de cómputo optimizados.

La colaboración ampliada también abarca un agente de voz instalado en las propias instalaciones para Centralna e-Rejestracja, el sistema central de citas de la plataforma nacional de salud electrónica de Polonia, cuya implementación cuenta con el apoyo de EasyCall. El agente llama a los pacientes que solo tienen teléfono fijo para recordarles sus citas y ayudarles a reprogramarlas. ElevenLabs afirma que el sistema central gestiona 40 millones de citas al año y registra tasas de inasistencia del 10 % al 20 %; la implementación utiliza NVIDIA Confidential Computing para mantener los datos de los ciudadanos y el audio dentro de la infraestructura gubernamental y protegerlos durante su procesamiento.

El paquete de Summit hace que la estrategia empresarial de ElevenLabs dependa de algo más que el rendimiento de los modelos: el ajuste y Memory se nutren de los datos acumulados durante el uso real, Routines conecta las conversaciones con los sistemas empresariales, y el programa de socios y Marketplace crean vías de acceso a las empresas. Por tanto, el principal reto de ejecución tiene dos vertientes: ampliar el uso en producción de los productos presentados en versión preliminar y con acceso anticipado, y avanzar desde la navegación en Marketplace hasta las compras mediante los compromisos existentes de ElevenLabs.