Annie Chechitelli, Diretora de Produto da Turnitin – Série de Entrevistas

Annie Chechitelli é a Diretora de Produto da Turnitin, onde supervisiona a suíte de aplicações da Turnitin, incluindo integridade acadêmica, avaliação e feedback, e capacidades de avaliação.

Turnitin é uma empresa global dedicada a garantir a integridade da educação e melhorar significativamente os resultados de aprendizado. Por 25 anos, a Turnitin tem se associado a instituições de ensino para promover a honestidade, a consistência e a justiça em todas as áreas de estudo e tipos de avaliação. Os produtos da Turnitin são usados por instituições de ensino e programas de certificação e licenciamento para manter a integridade e aumentar o desempenho de aprendizado, e por estudantes e profissionais para fazerem o seu melhor trabalho original.

Como a introdução de ferramentas de escrita de IA, como o ChatGPT, afetou a integridade acadêmica?

A acessibilidade mundial do ChatGPT criou novos canais potenciais para a má conduta acadêmica, incluindo a escrita gerada por IA, plágio e paráfrase, em uma escala massiva que continua a crescer. Para os educadores, a capacidade de distinguir entre o conteúdo gerado por IA e o conteúdo humano está se tornando cada vez mais difícil. Como resultado, garantir que os estudantes criem o seu melhor trabalho original vai além da detecção. Os educadores precisam da capacidade de intervir antes que a má conduta ocorra para reforçar a integridade acadêmica e as práticas de escrita éticas. A IA não vai desaparecer, e a nova era da integridade acadêmica exige uma compreensão robusta por parte dos estudantes e dos professores sobre como a IA pode ser usada de forma responsável para apoiar o aprendizado humano e as decisões.

Na Turnitin, estamos comprometidos em ajudar os estudantes e os educadores a entender o papel da IA na educação, incluindo a identificação de problemas de má conduta e a avaliação de como a IA pode ser melhor integrada à sala de aula. Ao ver a escrita de IA na educação através da lente de apenas uma peça do quebra-cabeça – identificando a escrita de IA nas submissões dos estudantes – as instituições e os educadores estão perdendo a visão geral, porque a IA pode beneficiar o aprendizado também. Essa tecnologia tem a capacidade de aumentar as ideias humanas e facilitar uma compreensão mais profunda de tópicos complexos, se usada corretamente. A IA em si não é uma ameaça ao pensamento original ou à integridade acadêmica, desde que os estudantes saibam como usar as ferramentas de forma ética. É responsabilidade dos educadores ajudar a fornecer aos estudantes orientação sobre o que é e o que não é um uso permitido da tecnologia – uma habilidade que os ajudará além da sala de aula e em suas futuras profissões.

Quais são os desafios específicos que os educadores enfrentam na detecção de conteúdo gerado por IA e paráfrase?

O uso de IA por estudantes do ensino superior supera o uso de IA por educadores. A Turnitin se associou à Tyton Partners* e descobriu que, entre os estudantes pesquisados, 59% disseram que usam ferramentas de escrita de IA pelo menos uma vez por mês, enquanto 40% dos administradores e 36% dos instrutores disseram o mesmo. A falta de familiaridade com essas ferramentas deixa os educadores no escuro sobre as capacidades e limitações da IA.

Além disso, o uso de IA não é mais apenas sobre o conteúdo gerado por IA. A paráfrase de IA decolou e é o método mais recente que alguns usam para evitar a detecção. Os educadores precisam de ferramentas de apoio que acompanhem os últimos avanços da IA e forneçam insights sobre o fluxo de trabalho e o processo de pensamento do estudante.

Essas características não visam substituir a discrição profissional do educador, mas sim fornecer insights adicionais para ajudar a tomar uma decisão. Relatórios, como os nossos, fornecem pontos de dados e recursos para apoiar um processo de trabalho com os estudantes, e não determinações de má conduta.

Em vez disso, nossas ferramentas de escrita de IA e paráfrase são projetadas para apoiar os educadores na iniciativa de conversas construtivas com os estudantes sobre a importância das práticas de escrita éticas e o uso apropriado de técnicas de paráfrase.

Também estamos construindo uma nova solução para a escrita dos estudantes para dar aos educadores e estudantes confiança na autenticidade do trabalho, focando no “comprovante de processo”. Juntamente com nossas verificações de plágio e IA existentes, nosso objetivo com essa solução é dar aos educadores confiança e insights sem sobrecarga, e oferecer aos estudantes conforto ao saber que seu trabalho árduo não será julgado apenas por uma nota. Esse produto será usado por um número seleto de universidades mais tarde este ano.

*A Turnitin foi uma parceira que forneceu compensação para realizar a Pesquisa Time for Class 2024: Desbloqueando o Acesso a Ensino e Aprendizado Digitais Efetivos.

Como funciona a nova funcionalidade de detecção de paráfrase de IA da Turnitin?

A paráfrase de IA refere-se ao processo de usar tecnologia de IA para reescrever texto enquanto retém o significado original. Essas ferramentas de IA, também conhecidas como giradores de texto, analisam o texto de entrada e geram versões alternativas que transmitem a mesma informação usando palavras ou estruturas de frases diferentes. O objetivo é tornar o texto gerado por IA indetectável.

No entanto, a funcionalidade de detecção de paráfrase de IA da Turnitin identifica instâncias em que a paráfrase de IA pode ter sido usada para modificar o texto gerado por IA em conteúdo submetido, ajudando os educadores e editores a manter a integridade da escrita de pesquisa e promover experiências de aprendizado autênticas para os estudantes.

Dentro da plataforma, o relatório de escrita de IA destaca os segmentos de texto que o modelo prevê terem sido provavelmente escritos por uma ferramenta de IA. Separadamente, também destaca o texto gerado por IA que pode ter sido modificado usando uma ferramenta de paráfrase de IA, para que os educadores e editores possam entender as nuances da detecção.

Como seus papéis anteriores na AWS e na Amazon (AMZN ), particularmente na tecnologia educacional e na distribuição de conteúdo digital, influenciaram sua abordagem para o desenvolvimento e aprimoramento da funcionalidade de detecção de paráfrase de IA da Turnitin?

Ao longo da minha carreira, sempre me concentrei na mentalidade de colocar o cliente em primeiro lugar: evoluindo constantemente, respondendo ao mercado e identificando as necessidades e feedback dos clientes. Essa é uma mentalidade que carreguei comigo para o meu papel na Turnitin e que está no coração da nossa estratégia de desenvolvimento de produtos.

A tecnologia sempre mudou a um ritmo acelerado, e o mesmo pode ser dito sobre a IA. Após o lançamento do nosso detector de escrita de IA, a Turnitin ouviu de educadores em todo o mundo que os estudantes estavam tentando contornar a detecção usando ferramentas de paráfrase. Os estudantes e pesquisadores podem ter usado a paráfrase de IA para modificar o conteúdo gerado por IA, incluindo o conteúdo produzido por modelos de linguagem como o ChatGPT, em uma tentativa de evitar a detecção por software de detecção de IA.

Em resposta, desenvolvemos nossa ferramenta de paráfrase de IA em julho de 2023, buscando abordar essa questão identificando instâncias em que a paráfrase de IA pode ter sido usada para modificar o texto gerado por IA em conteúdo submetido. Nosso objetivo é ajudar os educadores e editores a manter a integridade da escrita de pesquisa e promover experiências de aprendizado autênticas para os estudantes, especialmente à frente do ano letivo de 2024-2025.

De que maneira a Turnitin Originality pode ajudar as instituições a manter altos padrões de integridade acadêmica diante do surgimento da escrita de IA e do contrato de fraude?

A Turnitin Originality estabeleceu um novo padrão para a integridade acadêmica, tanto para os estudantes quanto para os educadores. Ela vai além do plágio para abordar novas e mudanças nas formas de má conduta, como a escrita de IA, fraude de contrato e paráfrase, e fornece aos educadores dados claros e ações para rastrear o desempenho dos estudantes em todo o seu grupo e avaliar potenciais problemas de má conduta.

Os estudantes também recebem apoio por meio de feedback formativo em tempo real sobre seu trabalho. A Originality compara a similaridade de texto, gramática e citações à medida que os estudantes trabalham, ajudando-os a fazer correções e evitar o plágio involuntário antes da submissão final.

Qual feedback você recebeu de educadores e instituições sobre a eficácia das ferramentas de detecção de escrita de IA e paráfrase da Turnitin?

Recentemente, a Turnitin se sentou com a Dra. Leslie Layne, professora associada da Universidade de Lynchburg, Virgínia (EUA). Layne lecionou 76 classes de escrita para calouros e usou a Turnitin desde que começou a trabalhar na universidade no outono de 2004.

Refletindo sobre os desafios antes do advento de ferramentas de detecção de escrita de IA eficazes, Layne recorda: “Era realmente demorado copiar e colar texto em detectores online.” Esse processo, embora necessário, estava longe de ser eficiente e 100% preciso, destacando a necessidade de soluções mais integradas e confiáveis. A introdução da ferramenta de detecção de escrita de IA da Turnitin foi um divisor de águas, fornecendo consistência e um processo muito mais fácil.

“Avaliar ensaios leva tempo. Estou muito afinado com o tempo que leva para fazer o que preciso fazer, então fiquei absolutamente encantado ao ouvir que a Turnitin estava incorporando a detecção de escrita de IA, porque então tudo está em um lugar”, disse Layne.

Um tema central na abordagem de Layne é o uso construtivo da IA na educação. Em vez de ver a IA como uma ameaça à integridade acadêmica, ela defende a integração da IA no processo de aprendizado. “Eu ensino com a IA em minha sala de aula de escrita para calouros, então estou fazendo com que eles usem o ChatGPT quase todos os dias”, explica. Essa abordagem prática com a IA equipa os estudantes com as habilidades para navegar e aproveitar essas ferramentas de forma eficaz e ética.

Como a funcionalidade Draft Coach integra-se com as outras ferramentas da Turnitin para apoiar os estudantes na produção de trabalhos originais e melhorar suas habilidades de escrita?

A funcionalidade Draft Coach existe dentro do produto Originality. Assim como a Originality apoia os professores na manutenção da integridade acadêmica, o Draft Coach fornece aos estudantes orientação sobre como melhorar suas habilidades de escrita e pesquisa acadêmica a todo momento. O feedback instantâneo sobre a similaridade de texto, gramática e paráfrase ajuda-os a evitar o plágio acidental.

Qual papel você vê a IA desempenhando no futuro da integridade acadêmica, e como a Turnitin está se preparando para enfrentar os desafios potenciais?

As ferramentas de escrita de IA têm o potencial de tornar nossas vidas mais fáceis, incluindo a melhoria e personalização de conteúdo, a superação de barreiras linguísticas, o aumento da produtividade e a ajuda na brainstorming. No entanto, antes que alguém possa colher os benefícios dessas ferramentas, é necessário entender como usá-las de forma responsável e ética. A sala de aula pode ser parte da solução. É um espaço seguro para os estudantes aprenderem, praticarem, correrem riscos e crescerem com a tecnologia. O auditório pode servir como um excelente campo de treinamento para os estudantes aprenderem a entender os limites éticos, experimentarem de forma segura, aprendam a discernir entre fatos e informações imprecisas e fortaleçam suas habilidades de pensamento crítico.

Para ajudar os educadores e as instituições a navegar na nova realidade, eles precisam de parceiros confiáveis, como a Turnitin, que entendam suas necessidades e as de seus estudantes. De fato, dois anos antes do lançamento público do ChatGPT, a Turnitin começou a trabalhar em uma ferramenta que daria aos educadores transparência sobre o uso da escrita de IA, para que pudessem orientar os estudantes a usá-la de forma responsável e apoiar a integridade acadêmica.

À medida que a IA evolui, os produtos da Turnitin também evoluirão. Novas funcionalidades podem ser facilmente integradas a produtos e fluxos de trabalho existentes para facilitar o uso dos clientes e reduzir a curva de aprendizado. Regularmente fornecemos recursos atualizados para estudantes, educadores e instituições para ajudá-los a navegar nessa nova tecnologia e dados de detecção em nível de frase.

Finalmente, muitos de nossos funcionários têm formação em educação, o que garante que nossos produtos sejam pedagogicamente sólidos. Sem suas perspectivas, não poderíamos atender às necessidades em constante evolução dos educadores e administradores. Com tudo isso em mente, nossa solução de “comprovante de processo” que está por vir, que será integrada aos fluxos de trabalho existentes da Turnitin, dará aos educadores e estudantes confiança na autenticidade do trabalho.

Qual conselho você daria aos educadores e instituições que buscam aprimorar suas políticas de integridade acadêmica diante das tecnologias de IA em evolução?

Minha opinião sobre as políticas acadêmicas é que ter múltiplas políticas de IA em diferentes níveis institucionais é uma forma de garantir que as nuances situacionais sejam consideradas. Por exemplo, uma política de IA para uma aula de escrita criativa pode não ser a melhor abordagem para o uso potencial de IA em um trabalho de pesquisa. Os instrutores que criam políticas de nível de atribuição devem fornecer detalhes sobre o uso aceitável de IA com base nos objetivos de aprendizado da atribuição.

Em nível institucional, no entanto, as políticas de integridade acadêmica devem ser amplas, com foco em como os estudantes representam seu trabalho e citam suas fontes. Isso evita a plágio intencional, ao mesmo tempo em que dá espaço para nuances associadas à situação única.

Em geral, é crucial olhar além de um simples percentual de detecção. Nossas ferramentas são projetadas para apoiar as instituições e os educadores, não para substituí-los completamente. Os professores conhecem melhor seus estudantes e devem usar qualquer detecção de IA para facilitar conversas produtivas sobre o uso apropriado de IA e pensamento crítico.

Para apoiar melhor os educadores, a Turnitin também tem uma vasta biblioteca de recursos e uma rede de professores expansiva disponível para ajudar as instituições a construir suas políticas, incluindo um guia prontamente disponível que compartilha insights detalhados sobre como revisar e revisar as políticas de integridade acadêmica existentes para abordar as ameaças da IA, disponível online para download gratuito.

Obrigado pela grande entrevista, leitores que desejam aprender mais devem visitar Turnitin.