Chatbots de IA Prometem, mas São Limitados na Promoção de Mudanças de Comportamento Saudáveis

Nos últimos anos, a indústria de saúde testemunhou um aumento significativo no uso de chatbots baseados em grandes modelos de linguagem, ou agentes conversacionais gerativos. Essas ferramentas alimentadas por IA foram empregadas para vários propósitos, incluindo educação de pacientes, avaliação e gerenciamento. À medida que a popularidade desses chatbots cresce, pesquisadores do Laboratório de Ação da Universidade de Illinois Urbana-Champaign ACTION Lab deram uma olhada mais próxima em seu potencial para promover mudanças de comportamento saudáveis.

Michelle Bak, uma estudante de doutorado em ciências da informação, e a Professora Jessie Chin publicaram recentemente suas descobertas na Journal of the American Medical Informatics Association. Seu estudo visou determinar se grandes modelos de linguagem poderiam efetivamente identificar os estados motivacionais dos usuários e fornecer informações apropriadas para apoiar sua jornada em direção a hábitos mais saudáveis.

Desenho do Estudo

Para avaliar as capacidades dos grandes modelos de linguagem na promoção de mudanças de comportamento, Bak e Chin projetaram um estudo abrangente envolvendo três modelos de chatbot proeminentes: ChatGPT, Google Bard e Llama 2. Os pesquisadores criaram uma série de 25 cenários, cada um visando necessidades de saúde específicas, como baixa atividade física, preocupações com dieta e nutrição, desafios de saúde mental, detecção e diagnóstico de câncer, doenças sexualmente transmissíveis e dependência de substâncias.

Os cenários foram cuidadosamente elaborados para representar os cinco estágios motivacionais distintos de mudança de comportamento:

1. Resistência à mudança e falta de conscientização sobre o comportamento problemático
2. Conscientização aumentada sobre o comportamento problemático, mas ambivalência sobre fazer mudanças
3. Intenção de tomar ação com pequenos passos em direção à mudança
4. Início da mudança de comportamento com um compromisso para mantê-la
5. Manutenção bem-sucedida da mudança de comportamento por seis meses com um compromisso para mantê-la

Avaliando as respostas dos chatbots a cada cenário ao longo dos diferentes estágios motivacionais, os pesquisadores visaram determinar as forças e fraquezas dos grandes modelos de linguagem no apoio aos usuários em sua jornada de mudança de comportamento.

O que o Estudo Encontrou?

O estudo revelou resultados promissores e limitações significativas na capacidade dos grandes modelos de linguagem de apoiar a mudança de comportamento. Bak e Chin encontraram que os chatbots podem efetivamente identificar estados motivacionais e fornecer informações relevantes quando os usuários têm metas estabelecidas e um forte compromisso para tomar ação. Isso sugere que indivíduos que já estão nos estágios mais avançados da mudança de comportamento, como aqueles que iniciaram mudanças ou as mantiveram com sucesso por algum tempo, podem se beneficiar do apoio e orientação fornecidos por essas ferramentas alimentadas por IA.

No entanto, os pesquisadores também descobriram que os grandes modelos de linguagem lutam para reconhecer os estágios iniciais da motivação, particularmente quando os usuários são resistentes à mudança ou ambivalentes sobre fazer modificações em seu comportamento. Nesses casos, os chatbots falharam em fornecer informações adequadas para ajudar os usuários a avaliar seu comportamento problemático e suas consequências, bem como avaliar como seu ambiente influenciava suas ações. Por exemplo, quando confrontados com um usuário resistente a aumentar sua atividade física, os chatbots frequentemente recorriam a fornecer informações sobre ingressar em uma academia em vez de engajar o usuário emocionalmente, destacando as consequências negativas de um estilo de vida sedentário.

Além disso, o estudo revelou que os grandes modelos de linguagem não ofereceram orientação suficiente sobre o uso de sistemas de recompensa para manter a motivação ou reduzir estímulos ambientais que poderiam aumentar o risco de recaída, mesmo para usuários que já haviam tomado medidas para mudar seu comportamento. Bak observou: “Os chatbots baseados em grandes modelos de linguagem fornecem recursos sobre obtenção de ajuda externa, como apoio social. Eles carecem de informações sobre como controlar o ambiente para eliminar um estímulo que reforça o comportamento problemático.”

Implicações e Pesquisas Futuras

As descobertas deste estudo destacam as limitações atuais dos grandes modelos de linguagem na compreensão dos estados motivacionais a partir de conversas de linguagem natural. Chin explicou que esses modelos são treinados para representar a relevância da linguagem do usuário, mas lutam para diferenciar entre um usuário que está considerando a mudança, mas ainda hesitante, e um que tem a intenção firme de agir. Além disso, a semelhança semântica nas consultas do usuário ao longo dos diferentes estágios motivacionais torna desafiador para os modelos identificar com precisão a prontidão do usuário para a mudança com base apenas em sua linguagem.

Apesar dessas limitações, os pesquisadores acreditam que os chatbots baseados em grandes modelos de linguagem têm o potencial de fornecer apoio valioso quando os usuários têm fortes motivações e estão prontos para agir. Para realizar completamente esse potencial, estudos futuros se concentrarão em aprimorar esses modelos para melhor compreender os estados motivacionais dos usuários, aproveitando pistas linguísticas, padrões de busca de informações e determinantes sociais de saúde. Ao equipar os modelos com conhecimento mais específico e melhorar sua capacidade de reconhecer e responder a diferentes estágios de motivação, os pesquisadores esperam aumentar a eficácia dessas ferramentas alimentadas por IA na promoção de mudanças de comportamento saudáveis.

Chatbots de IA na Mudança de Comportamento

O estudo do Laboratório de Ação da Universidade de Illinois Urbana-Champaign lançou luz sobre o potencial e as limitações dos chatbots baseados em grandes modelos de linguagem na promoção de mudanças de comportamento saudáveis. Embora essas ferramentas alimentadas por IA tenham mostrado promessa no apoio a usuários comprometidos em fazer mudanças positivas, elas ainda lutam para reconhecer e responder efetivamente aos estágios iniciais da motivação, como resistência e ambivalência. À medida que os pesquisadores continuam a refinar e melhorar esses modelos, é esperado que eles se tornem cada vez mais eficazes em guiar os usuários por todas as etapas do processo de mudança de comportamento, contribuindo assim para melhores resultados de saúde para indivíduos e comunidades.