ElevenLabs apresenta personalização de modelos, ElevenAI e Programa de Parceiros

A ElevenLabs anunciou, em 11 de novembro de 2026, que ajudará empresas a ajustar modelos de linguagem de código aberto selecionados e seus modelos de voz com dados de implantações em operação. O anúncio também inclui um novo aplicativo corporativo, o ElevenAI, e um programa de parceiros, apresentados na cúpula da empresa em Nova York.

O pacote amplia a atuação da ElevenLabs para além da geração de voz e da transcrição, abrangendo também softwares para gerenciar conversas com clientes e o trabalho dos funcionários. O CEO Mati Staniszewski afirmou que, dentro de alguns anos, os agentes conversacionais se tornariam “infraestrutura crítica para todas as empresas, tão essencial quanto a nuvem ou os pagamentos”, apresentando os produtos como parte de uma iniciativa mais ampla para expandir a implantação de soluções corporativas.

Modelos personalizados para cada empresa e roteamento de conversas

A ElevenLabs planeja iniciar o trabalho de personalização nos próximos meses. As empresas trabalharão com os pesquisadores da companhia para ajustar os modelos às necessidades de seus próprios clientes e ao contexto operacional, escolhendo métricas de otimização como satisfação do cliente ou confiabilidade. Como os dados vêm de implantações em operação, as empresas poderão continuar aprimorando os modelos à medida que as interações se acumularem, em vez de depender apenas de um modelo geral do setor.

A ElevenLabs já aplica essa abordagem específica para cada setor com o Scribe v3 Medical, um modelo de transcrição para a área da saúde desenvolvido para reconhecer terminologia especializada. Staniszewski afirmou que também está em desenvolvimento um modelo otimizado para o setor de serviços financeiros.

O Interaction Engine, apresentado em prévia, aborda outro problema: decidir como uma conversa deve transcorrer. Ele gerencia a alternância de turnos e as interrupções e pode atribuir diferentes modelos de linguagem a diferentes partes de uma conversa, usando um modelo mais barato para a triagem e um modelo de ponta para tarefas complexas. O objetivo é evitar que conversas rotineiras exijam um modelo de ponta em todas as etapas e limitar o uso de tokens.

Memória, automação e o aplicativo ElevenAI

Segundo a ElevenLabs, o ElevenAgents, sua plataforma para implantar agentes de voz e chat, terá os recursos Memória e Rotinas. O recurso Memória reconhecerá clientes autenticados que retornam e condensará cada conversa em um registro estruturado de preferências, restrições e ocasiões futuras, mantendo o sistema de gestão do relacionamento com o cliente como registro principal dos clientes. Por exemplo, um cliente que prefere falar em espanhol e só pode conversar depois das 17h não precisará repetir essas informações na próxima ligação.

O recurso Rotinas, também previsto para chegar em breve, foi desenvolvido para automatizar tarefas em várias etapas antes, durante e depois das conversas, conectando-se a ferramentas e sistemas existentes. Entre os exemplos estão fazer uma pré-avaliação de um solicitante de hipoteca e retornar a ligação em poucos minutos, lembrar pacientes de consultas e oferecer horários cancelados a pacientes em lista de espera, enviar relatórios por e-mail, registrar informações em um sistema de gestão do relacionamento com o cliente ou iniciar ligações. Em conjunto, esses recursos ampliam a atuação do ElevenAgents para além de responder a perguntas, permitindo manter o contexto e realizar as tarefas relacionadas a uma conversa.

Para os funcionários, Staniszewski apresentou uma prévia do ElevenAI, um aplicativo que escuta conversas faladas, inclusive reuniões presenciais, e produz anotações, resumos e itens de ação. O aplicativo também pode oferecer assistência em tempo real e compartilhar contexto entre pessoas e agentes. Segundo a ElevenLabs, o aplicativo registra as anotações das reuniões com o consentimento dos participantes e inclui mecanismos de aviso e consentimento.

O acesso antecipado gratuito ao ElevenAI foi aberto junto com o anúncio. O ditado e as anotações de reuniões usam o Scribe v3, que a ElevenLabs descreve como seu modelo de transcrição de áudio gravado, compatível com 102 idiomas; a versão separada Scribe v3 Live foi desenvolvida para processar áudio em tempo real com baixa latência.

Parceiros, Marketplace e infraestrutura da NVIDIA

A ElevenLabs informa ter mais de 550 parceiros em 44 países, incluindo Google Cloud, IBM, Deloitte, DXC e Genesys. O novo Programa de Parceiros permite que consultorias, integradores de sistemas, fornecedores de software e agências integrem o ElevenAgents às plataformas tecnológicas corporativas ou trabalhem com os engenheiros da ElevenLabs alocados junto aos clientes em implantações complexas. Uma aliança com a McKinsey e a QuantumBlack, AI by McKinsey, combina a plataforma com o trabalho de transformação empresarial da McKinsey.

O Marketplace que acompanha o programa oferece inicialmente um catálogo selecionado de aplicativos desenvolvidos por parceiros para os setores de saúde, serviços financeiros, seguros, educação e varejo. As empresas podem consultar os aplicativos e entrar em contato com seus desenvolvedores; a previsão é que as compras por meio de compromissos existentes com a ElevenLabs comecem em 2027.

A ElevenLabs e a NVIDIA anunciaram que o Nemotron 3.5 Super VL está disponível no ElevenAgents e que a ElevenLabs planeja adicionar 15 MW de capacidade computacional NVIDIA Vera Rubin, além dos sistemas Blackwell Ultra já existentes. A capacidade adicional destina-se a grandes implantações com requisitos de segurança ou residência de dados e dará aos pesquisadores da ElevenLabs acesso a recursos computacionais otimizados.

A colaboração ampliada também abrange um agente de voz instalado localmente para a Centralna e-Rejestracja, o sistema central de agendamento da plataforma nacional de saúde digital da Polônia, cuja implementação conta com o apoio da EasyCall. O agente liga para pacientes que dispõem apenas de telefone fixo para lembrá-los das consultas e ajudá-los a remarcar. Segundo a ElevenLabs, o sistema central gerencia 40 milhões de consultas por ano e registra taxas de não comparecimento de 10% a 20%; a implementação usa o NVIDIA Confidential Computing para manter os dados dos cidadãos e o áudio dentro da infraestrutura governamental e protegê-los durante o processamento.

O pacote apresentado na Summit faz com que a estratégia empresarial da ElevenLabs dependa de mais do que o desempenho dos modelos: o ajuste fino e o Memory se baseiam em dados acumulados durante o uso real, o Routines conecta conversas a sistemas empresariais, e o programa de parceiros e o Marketplace criam caminhos de acesso às empresas. Portanto, o principal desafio de execução tem duas frentes: ampliar o uso em produção dos produtos apresentados em prévia e em acesso antecipado, e fazer com que a navegação no Marketplace resulte em compras, aproveitando os compromissos já existentes com a ElevenLabs.