Líderes de pensamento

Parando a IA de Contar Histórias: Um Guia para Prevenir Alucinações

mm
Adicione Unite.AI às suas fontes preferidas no Google

A IA está revolucionando a forma como quase todas as indústrias operam. Está nos tornando mais eficientes, mais produtivos e – quando implementada corretamente – melhores em nossos trabalhos em geral. Mas à medida que nossa dependência dessa tecnologia nova aumenta rapidamente, devemos nos lembrar de um simples fato: a IA não é infalível. Seus resultados não devem ser aceitos como verdade porque, assim como os humanos, a IA pode cometer erros.

Chamamos esses erros de “alucinações da IA”. Tais erros variam desde responder incorretamente a um problema de matemática até fornecer informações imprecisas sobre políticas governamentais. Em indústrias altamente regulamentadas, alucinações podem levar a multas caras e problemas legais, sem mencionar clientes insatisfeitos.

A frequência de alucinações da IA deve, portanto, ser causa de preocupação: estima-se que os modelos de linguagem grandes modernos (LLMs) alucinam em qualquer lugar de 1% a 30% do tempo. Isso resulta em centenas de respostas falsas geradas diariamente, o que significa que as empresas que buscam aproveitar essa tecnologia devem ser extremamente seletivas ao escolher quais ferramentas implementar.

Vamos explorar por que as alucinações da IA acontecem, o que está em jogo e como podemos identificá-las e corrigi-las.

Lixo dentro, lixo fora

Lembra-se de jogar o jogo “telefone” quando era criança? Como a frase inicial se distorcia à medida que passava de jogador para jogador, resultando em uma declaração completamente diferente no final?

A forma como a IA aprende com suas entradas é semelhante. As respostas que os LLMs geram são apenas tão boas quanto as informações que recebem, o que significa que o contexto incorreto pode levar à geração e disseminação de informações falsas. Se um sistema de IA for construído com dados imprecisos, desatualizados ou tendenciosos, então suas saídas refletirão isso.

Assim, um LLM é apenas tão bom quanto suas entradas, especialmente quando há falta de intervenção ou supervisão humana. À medida que mais soluções de IA autônomas se proliferam, é crucial que forneçamos às ferramentas o contexto de dados correto para evitar causar alucinações. Precisamos de treinamento rigoroso desses dados e/ou a capacidade de orientar os LLMs de tal forma que respondam apenas do contexto que lhes é fornecido, em vez de buscar informações em qualquer lugar da internet.

Por que as alucinações importam?

Para empresas que atendem ao cliente, a precisão é tudo. Se os funcionários estão confiando na IA para tarefas como sintetizar dados do cliente ou responder a consultas do cliente, eles precisam confiar que as respostas que essas ferramentas geram são precisas.

Caso contrário, as empresas arriscam danos à sua reputação e lealdade do cliente. Se os clientes são alimentados com respostas insuficientes ou falsas por um chatbot, ou se são deixados esperando enquanto os funcionários verificam as saídas do chatbot, eles podem levar seus negócios para outro lugar. As pessoas não devem se preocupar se as empresas com as quais interagem estão alimentando-as com informações falsas – elas querem suporte rápido e confiável, o que significa que obter essas interações certas é de suma importância.

Os líderes empresariais devem fazer sua diligência devida ao selecionar a ferramenta de IA certa para seus funcionários. A IA deve liberar tempo e energia para que os funcionários se concentrem em tarefas de maior valor; investir em um chatbot que exige constante supervisão humana derrota o propósito da adoção. Mas a existência de alucinações é realmente tão proeminente ou o termo é simplesmente sobre-usado para identificar qualquer resposta que supomos ser incorreta?

Combater as alucinações da IA

Considere: Teoria do Significado Dinâmico (DMT), o conceito de que um entendimento entre duas pessoas – nesse caso, o usuário e a IA – está sendo trocado. Mas, as limitações da linguagem e do conhecimento dos assuntos causam um desalinhamento na interpretação da resposta.

No caso de respostas geradas pela IA, é possível que os algoritmos subjacentes ainda não estejam totalmente equipados para interpretar ou gerar texto de forma que se alinhe com as expectativas que temos como humanos. Essa discrepância pode levar a respostas que podem parecer precisas na superfície, mas que, no final, carecem da profundidade ou nuances necessárias para uma compreensão verdadeira.

Além disso, a maioria dos LLMs gerais tira informações apenas do conteúdo disponível publicamente na internet. As aplicações empresariais da IA funcionam melhor quando são informadas por dados e políticas específicas de indústrias e empresas. Os modelos também podem ser aprimorados com feedback humano direto – particularmente soluções agênticas projetadas para responder ao tom e à sintaxe.

Tais ferramentas também devem ser testadas rigorosamente antes de se tornarem voltadas para o consumidor. Isso é uma parte crítica de prevenir as alucinações da IA. Todo o fluxo deve ser testado usando conversas baseadas em turnos com o LLM desempenhando o papel de uma persona. Isso permite que as empresas assumam melhor o sucesso geral das conversas com um modelo de IA antes de liberá-lo no mundo.

É essencial que tanto os desenvolvedores quanto os usuários da tecnologia de IA permaneçam cientes da teoria do significado dinâmico nas respostas que recebem, bem como da dinâmica da linguagem sendo usada na entrada. Lembre-se, o contexto é fundamental. E, como humanos, a maior parte de nosso contexto é entendido por meios não ditos, seja por meio da linguagem corporal, tendências sociais – até nosso tom. Como humanos, temos o potencial de alucinar em resposta a perguntas. Mas, em nossa iteração atual da IA, nosso entendimento humano-para-humano não é facilmente contextualizado, então precisamos ser mais críticos do contexto que fornecemos por escrito.

Basta dizer – nem todos os modelos de IA são criados iguais. À medida que a tecnologia se desenvolve para completar tarefas cada vez mais complexas, é crucial que as empresas que visam implementá-la identifiquem ferramentas que melhorarão as interações e experiências do cliente, em vez de prejudicá-las.

O ônus não está apenas nos fornecedores de soluções para garantir que fizeram tudo em seu poder para minimizar a chance de alucinações. Os compradores potenciais também têm seu papel a desempenhar. Ao priorizar soluções que são rigorosamente treinadas e testadas e que podem aprender com dados proprietários (em vez de qualquer coisa e tudo na internet), as empresas podem aproveitar ao máximo seus investimentos em IA para preparar funcionários e clientes para o sucesso.

Dan Balaceanu, Diretor de Produto da DRUID AI, tem experiência em gerenciar departamentos e processos de desenvolvimento dentro de organizações empresariais. Ele é um arquiteto de soluções e gerente de projetos técnicos altamente qualificado, com mais de 15 anos de experiência em liderar projetos de desenvolvimento e implementação de médio porte, com coleta de requisitos do cliente, análise de sistemas, desenvolvimento de aplicativos e testes, em equipes focadas no cliente.