Quando a IA Pensar como os Humanos: Explorando a Mente dos LLMs e Agentes

Hoje, os LLMs e agentes aprendem, analisam e tomam decisões de maneiras que podem confundir a linha entre seu “pensamento” algorítmico e a mente humana. As abordagens em que são construídos já imitam nossos processos cognitivos, e a escala de seu treinamento supera a experiência humana por ordens de magnitude. Isso levanta a questão: estamos criando uma ferramenta que expande nossas capacidades ou estamos dando origem a um novo tipo de mente cujas consequências ainda são impossíveis de prever?

Como os modelos pensam

É importante distinguir entre os conceitos de LLMs e agentes. Para fazer uma analogia com um computador, um LLM pode ser comparado a um de seus componentes, por exemplo, o processador. Um agente, no entanto, é o sistema completo, uma “placa-mãe” à qual vários módulos são conectados: memória, placa gráfica e rede. Da mesma forma, um agente é um sistema complexo que pode incorporar um ou mais LLMs, suplementados com mecanismos de tomada de decisão e ferramentas para interagir com o ambiente externo.

Se considerarmos o trabalho de um único LLM, tudo se resume a correspondência de padrões. No entanto, quando um agente encadeia vários LLMs, podemos dizer que “pensa”, embora esse processo ainda seja construído sobre padrões. O agente constrói a lógica de interação entre os modelos: por exemplo, um LLM analisa a tarefa e, com base nessa análise, o agente determina qual ação outro LLM deve realizar.

O pensamento humano funciona de maneira semelhante: confiamos no conhecimento acumulado e nos padrões, os selecionamos no momento certo, os processamos e formulamos conclusões. Esse processo é chamado de raciocínio.

O ChatGPT, como um humano, tem dois tipos de memória: curta e longa. A diferença é que, nos humanos, o acesso a esses níveis de memória é mais complexo e nem sempre linear.

A memória curta é a informação com a qual estamos trabalhando agora. Para uma pessoa, pode ser o que você disse cinco minutos atrás: ela pode se lembrar ou não. O GPT, no entanto, sempre leva em consideração tudo dentro de sua “janela de contexto” – não pode pular ou ignorar esses dados.

A memória de longo prazo nos humanos consiste em memórias que nem sempre estão ativas e podem surgir apenas com gatilhos específicos: uma memória da infância, um trauma ou, por exemplo, trabalhar com um psicólogo. O GPT tem uma lógica semelhante: não “lembra” informações por conta própria, a menos que seja especificamente ativado. Por exemplo, uma instrução como “Nunca me pergunte isso novamente” ou “Sempre me trate formalmente” pode ser armazenada na memória de longo prazo e aplicada durante cada sessão.

Outro exemplo de memória de longo prazo é o documento salvo. Suponha que você tenha carregado no GPT uma instrução para realizar uma pesquisa de marketing. O modelo pode armazená-la na memória, mas isso não significa que irá se referir a esse documento com cada pergunta. Se você perguntar: “Posso iluminar a Lua com uma lanterna?”, o GPT irá ignorar a instrução. Mas se o pedido contém palavras-chave que correspondem ao texto do documento, o modelo pode “lembrar” disso.

Esse mecanismo é implementado por meio do RAG (Geração Aumentada por Recuperação), uma abordagem em que o modelo ganha acesso a informações armazenadas acionadas por sinais relevantes por meio de bancos de dados vetoriais.

Portanto, pode-se dizer que o modelo realmente tem memória, mas funciona de acordo com uma lógica diferente, mais formalizada, distinta da memória humana.

Por que uma conversa com a IA às vezes parece terapêutica e, outras vezes, fria e robótica?

Os modelos de linguagem modernos são extremamente grandes: armazenam uma quantidade colossal de dados, conhecimento e contexto. Todas essas informações são organizadas em chamados “clusters”, áreas temáticas e semânticas. O modelo foi treinado em fontes diversas, desde ficção e artigos científicos até comentários do YouTube.

Quando você interage com a IA, sua consulta (prompt) efetivamente direciona o modelo para um determinado cluster.

Por exemplo, se você escrever: “Você é um advogado imobiliário em Nova York com 20 anos de experiência, ajude-me a comprar um apartamento”, o modelo ativa vários clusters ao mesmo tempo: advogado → Nova York → imóveis. Como resultado, você recebe uma resposta coerente, relevante e realista, como se estivesse realmente consultando um profissional experiente.

Se a consulta diz respeito a tópicos mais pessoais ou filosóficos, como auto-desenvolvimento ou emoções, o modelo “muda” para outros clusters, como psicologia, filosofia ou trabalho interno. Nesse caso, suas respostas podem parecer surpreendentemente humanas e até terapêuticas.

No entanto, com frases muito gerais ou vagas, o modelo “se perde” em sua estrutura de cluster e dá uma resposta padrão, formal, desapegada e sem tom emocional.

O estilo e a profundidade da resposta da IA dependem de qual cluster você a direciona com sua consulta.

A filosofia do treinamento de modelos e RLHF

A inteligência artificial tem diferentes abordagens para o aprendizado. Não é tanto uma filosofia quanto uma estratégia.

A opção clássica é o aprendizado supervisionado, onde o modelo é dado uma pergunta e a resposta correta. Ele aprende observando o que é considerado correto e, em seguida, reproduz soluções semelhantes no futuro.

Mas outra abordagem é o RLHF (Aprendizado por Reforço com Feedback Humano). Essa é uma abordagem diferente: o modelo tenta algo, recebe um “prêmio” por ações bem-sucedidas e ajusta seu comportamento. Gradualmente, desenvolve uma estratégia eficaz.

O RLHF pode ser comparado ao processo de transformar matéria-prima em um produto acabado. Para fazer um modelo que seja conveniente de usar, é necessário um trabalho colossal com feedback humano.

Imagine que mostro a você um objeto sem nomeá-lo diretamente. Você hesita: “É um estojo de cigarros? Um porta-cartões?” Eu dou apenas dicas como: “Mais perto”, “Mais longe”, “60% sim”. Depois de centenas de iterações como essas, você adivinha: “Ah, é uma carteira”.

Os LLMs são treinados dessa forma. Humanos, anotadores e profissionais em geral avaliam: essa resposta é boa, essa é ruim e atribuem pontuações. Empresas como Keymakr, que se especializam em anotação e validação de dados de alta qualidade, desempenham um papel fundamental nesse processo. O feedback também vem de usuários comuns: likes, reclamações e reações. O modelo interpreta esses sinais, formando padrões de comportamento.

Como o treinamento de modelos parece na prática

Um exemplo vívido é o experimento da OpenAI treinando agentes usando aprendizado por reforço no jogo “Esconde-esconde”.

Dois times participaram: os “caçadores” (vermelho) e os “escondidos” (azul). As regras eram simples: se um caçador pegasse um escondido, ganhava um ponto; se não, perdia um. Inicialmente, os agentes tinham apenas habilidades físicas básicas, como correr e pular, sem estratégias pré-definidas.

No início, os caçadores agiam de forma caótica e pegar oponentes acontecia por acaso. Mas após milhões de iterações, seu comportamento evoluiu. Os escondidos começaram a usar objetos ao redor para bloquear portas e construir barreiras. Essas habilidades surgiram sem programação direta, puramente por meio de tentativas repetidas e recompensas por sucesso.

Em resposta, os caçadores começaram a usar o salto, uma capacidade disponível desde o início, mas anteriormente ignorada. Depois de uma série de falhas, o uso aleatório do salto revelou seu valor tático. Então, os escondidos complicaram sua defesa ainda mais, removendo objetos da linha de visão dos caçadores e construindo abrigos mais confiáveis.

O experimento mostrou que, por meio de bilhões de ciclos de tentativa, erro, recompensas e penalidades, pode se formar um comportamento cooperativo complexo sem intervenção do desenvolvedor. Além disso, os agentes começaram a agir em coordenação, mesmo que mecanismos de comunicação não tenham sido programados, simplesmente porque a equipe provou ser mais eficaz.

É o mesmo com os grandes modelos de linguagem. É impossível criar scripts para todos os cenários: há muitas situações e muita variabilidade no mundo. Portanto, não ensinamos o modelo regras fixas; ensinamos como aprender.

Esse é o valor do RLHF. Sem ele, um LLM e agentes permanecem apenas uma biblioteca de textos. Com ele, torna-se um parceiro de conversa capaz de se adaptar, corrigir a si mesmo e, essencialmente, evoluir.

O que vem a seguir?

Muitos se perguntam se os desenvolvimentos de LLMs e agentes poderiam levar a consequências indesejáveis ou até perigosas.

É importante entender que o que vemos hoje não é nem um MVP, mas apenas um protótipo.

A verdadeira revolução não será sobre ajudar a escrever uma carta bonita ou traduzi-la para o francês. Essas são coisas menores. A direção principal é a automação de microtarefas e processos rotineiros, deixando apenas tarefas verdadeiramente criativas, intelectuais ou tempo para descanso para os humanos.

As inovações reais estão focadas em torno de agentes, sistemas que podem pensar, agir e tomar decisões independentemente, em vez de uma pessoa. É exatamente onde empresas como OpenAI, Google, Meta e outras estão concentrando seus esforços hoje.

Os grandes modelos de linguagem são apenas a base. O verdadeiro futuro está em agentes treinados para viver em um mundo dinâmico, receber feedback e se adaptar a mudanças.