Annie Chechitelli, Chief Product Officer på Turnitin – Intervjuserie

Annie Chechitelli är Chief Product Officer på Turnitin, där hon ansvarar för Turnitins svit av applikationer, inklusive akademisk integritet, betygsättning och feedback, samt bedömningsförmåga.

Turnitin är ett globalt företag som är dedikerat till att säkerställa integriteten i utbildning och meningsfullt förbättra läranderesultat. Under 25 år har Turnitin samarbetat med utbildningsinstitutioner för att främja ärlighet, konsekvens och rättvisa inom alla ämnesområden och bedömningsformer. Turnitins produkter används av utbildningsinstitutioner och certifierings- och licensieringsprogram för att upprätthålla integritet och öka lärandeprestation, och av studenter och proffs för att göra sitt bästa, originalarbete.

Hur har introduktionen av AI-skrivverktyg som ChatGPT påverkat akademisk integritet?

ChatGPT:s globala tillgänglighet har skapat nya potentiella utlopp för akademiskt fusk, inklusive AI-genererat skrivande, plagiat och parafrasering, i en massiv skala som bara fortsätter att växa. För utbildare är det allt svårare att skilja mellan AI- och människogenererat innehåll. Som ett resultat går det utöver att upptäcka fusk. Utbildare behöver förmågan att ingripa innan fusk uppstår för att stärka akademisk integritet och etiska skrivpraktiker. AI är inte på väg att försvinna, och den nya eran av akademisk integritet kräver en robust förståelse från både studenter och lärare om hur AI kan användas ansvarsfullt för att stödja mänskligt lärande och beslutsfattande.

På Turnitin är vi engagerade i att hjälpa studenter och utbildare att förstå rollen av AI i utbildning, inklusive att identifiera fuskproblem och bedöma hur det kan integreras i klassrummet på bästa sätt. Genom att se AI-skrivande i utbildning genom linsen av bara en pusselbit – att identifiera AI-skrivande i studenters inlämnade arbeten – missar institutioner och utbildare den fulla bilden, eftersom AI kan gynna lärande också. Denna teknik har förmågan att förstärka mänskliga idéer och underlätta en djupare förståelse av komplexa ämnen om den används korrekt. AI i sig är inte ett hot mot originaltänkande eller akademisk integritet så länge studenter vet hur de ska använda verktygen etiskt. Det är utbildarnas ansvar att hjälpa studenterna att förstå vad som är och vad som inte är en tillåten användning av tekniken – en färdighet som kommer att hjälpa dem bortom klassrummet och in i sina framtida yrken.

Vilka specifika utmaningar möter utbildare när de försöker upptäcka AI-genererat och parafraserat innehåll?

Studenter på högskolor använder AI i mycket större utsträckning än utbildare. Turnitin samarbetade med Tyton Partners* och fann att 59% av studenterna sa att de använder AI-skrivverktyg minst en gång i månaden, medan 40% av administratörerna och 36% av instruktörerna gjorde det. En brist på bekantskap med dessa verktyg lämnar utbildare i mörkret om AI:s förmågor och begränsningar.

Dessutom är AI-användning inte bara om AI-genererat innehåll längre. AI-parafrasering har tagit fart och är den senaste metoden som vissa använder för att undvika upptäckt. Utbildare behöver stödverktyg som håller jämna steg med AI:s senaste framsteg och ger insikt i en students arbetsflöde och tankeprocess.

Dessa funktioner är inte avsedda att ersätta utbildarens professionella omdöme, utan snarare att tillhandahålla ytterligare insikter för att hjälpa till att fatta ett beslut. Rapporter, som vår, tillhandahåller data och resurser för att stödja en process för att arbeta med studenter, inte bestämningar av fusk.

I stället är våra AI-skriv- och parafraseringsverktyg utformade för att stödja utbildare i att initiera konstruktiva samtal med studenter om vikten av etiska skrivpraktiker och korrekt användning av parafraseringsmetoder.

Vi bygger också en ny lösning för studenters skrivande för att ge både utbildare och studenter förtroende för arbetets äkthet genom att fokusera på “bevis för process”. I kombination med våra befintliga plagiat- och AI-kontroller är vårt mål med denna lösning att ge utbildare förtroende och insikt utan bördor, och erbjuda studenter trygghet i att veta att deras hårda arbete inte kommer att bedömas enbart av ett betyg. Den här produkten kommer att användas av ett urval universitet senare i år.

*Turnitin var en partner i att tillhandahålla ersättning för att genomföra Tyton Partners Time for Class 2024: Unlocking Access to Effective Digital Teaching & Learning.

Kan du förklara hur Turnitins nya AI-parafraseringsdetekteringsfunktion fungerar?

AI-parafrasering refererar till processen att använda AI-teknik för att omformulera text medan man behåller den ursprungliga meningen. Dessa AI-drivna verktyg, också kända som textspinners, analyserar inmatningstexten och genererar alternativa versioner som förmedlar samma information med hjälp av olika ord eller meningsstrukturer. Målet – att göra AI-genererad text osynlig.

Men Turnitins AI-parafraseringsdetekteringsfunktion identifierar fall där AI-parafrasering kan ha använts för att modifiera AI-genererad text i inlämnade arbeten, vilket hjälper utgivare och utbildare att upprätthålla integriteten i forskningsskrivande och främja äkta lärandeupplevelser för studenter.

Inom plattformen markerar AI-skrivrapporten de textsegment som modellen förutspår var skrivna av ett AI-verktyg. Separat markerar den också AI-genererad text som kan ha modifierats med hjälp av ett AI-parafraseringsverktyg, så att utbildare och utgivare kan förstå nyanserna i upptäckt.

Hur har dina tidigare roller på AWS och Amazon (AMZN ), särskilt inom utbildningsteknologi och digital innehållsdistribution, påverkat din tillvägagångssätt för att utveckla och förbättra Turnitins AI-parafraseringsdetekteringsfunktion?

Under hela min karriär har jag alltid fokuserat på kundförst-mentaliteten: konstant utveckling, svarar på marknaden och identifierar kundbehov och feedback. Detta är en mentalitet som jag har burit med mig in i min roll på Turnitin och som ligger till grund för vår produktutvecklingsstrategi.

Tekniken har alltid förändrats i en rasande takt och samma sak kan sägas om AI. Efter lanseringen av vår AI-skrivdetektor hörde Turnitin från utbildare runt om i världen att studenter försökte kringgå upptäckt genom att använda parafraseringsverktyg. Studenter och forskare kan ha använt AI-parafrasering för att modifiera AI-genererat innehåll, inklusive innehåll producerat av språkmodeller som ChatGPT, i ett försök att undvika upptäckt av AI-upptäktssystem.

I stället utvecklade vi vår AI-parafraseringsfunktion i juli 2023, i syfte att lösa detta problem genom att identifiera fall där AI-parafrasering kan ha använts för att modifiera AI-genererad text i inlämnade arbeten. Vårt mål är att hjälpa utgivare och utbildare att upprätthålla integriteten i forskningsskrivande och främja äkta lärandeupplevelser för studenter, särskilt inför läsåret 2024-2025.

På vilket sätt kan Turnitin Originality hjälpa institutioner att upprätthålla höga standarder för akademisk integritet mitt i uppkomsten av AI-skrivande och kontraktbedrägeri?

Turnitin Originality har satt en helt ny standard för akademisk integritet för både studenter och utbildare. Den går utöver plagiat för att hantera nya och förändrade former av fusk, som AI-skrivande, kontraktbedrägeri och parafrasering, och ger utbildare tydliga, handlingsbara data för att spåra studentprestationer över hela kohorten och bedöma potentiella fuskproblem.

Studenter får också stöd genom realtidsformativ feedback på sitt arbete. Originality jämför textlikhet, grammatik och citat medan studenter arbetar, vilket hjälper dem att göra korrigeringar och undvika oavsiktligt plagiat innan den slutliga inlämningen.

Vilken feedback har du fått från utbildare och institutioner om effektiviteten av Turnitins AI-skriv- och parafraseringsdetekteringsverktyg?

Nyligen satt Turnitin ner med Dr. Leslie Layne, en biträdande professor vid University of Lynchburg, Virginia (USA). Layne har undervisat 76 nybörjarklasser i skrivande och har använt Turnitin sedan hon började på universitetet hösten 2004.

När hon reflekterar över utmaningarna före tillkomsten av effektiva AI-skrivdetekteringsverktyg, minns Layne, “Det var verkligen tidskrävande att kopiera och klistra in text i online-detektorer.” Denna process, som var nödvändig, var långt ifrån effektiv och 100% exakt, vilket underströk behovet av mer strömlinjeformade och tillförlitliga lösningar. Introduktionen av Turnitins AI-skrivdetektor var en vändpunkt, som gav konsekvens och en mycket behövlig lätthet i processen.

“Att betygsätta uppsatser tar tid. Jag är mycket väl anpassad till den tid det tar att göra det jag behöver göra, så jag var absolut förbluffad över att höra att Turnitin skulle integrera AI-skrivdetektering, eftersom allt då var på en plats”, sa Layne.

En central tematik i Lays tillvägagångssätt är det konstruktiva användandet av AI i utbildning. I stället för att se AI som ett hot mot akademisk integritet, förespråkar hon integrationen av AI i lärandeprocessen. “Jag undervisar med AI i mina nybörjarklasser i skrivande, så jag låter dem använda ChatGPT i nästan varje lektion”, förklarar hon. Detta praktiska tillvägagångssätt med AI utrustar studenterna med färdigheter för att navigera och utnyttja dessa verktyg både effektivt och etiskt.

Hur integrerar Draft Coach™-funktionen med Turnitins andra verktyg för att stödja studenter i att producera originalarbete och förbättra sina skrivfärdigheter?

Draft Coach™-funktionen finns inom Originality-produkten. Precis som Originality stöder lärare i att upprätthålla akademisk integritet, ger Draft Coach studenterna vägledning om hur de kan förbättra sina akademiska skriv- och forskningsfärdigheter alltid. Omedelbar feedback på textlikhet, grammatik och parafrasering hjälper dem att undvika oavsiktligt plagiat.

Vilken roll ser du att AI kommer att spela i framtiden för akademisk integritet, och hur förbereder sig Turnitin för att hantera potentiella nya utmaningar?

AI-skrivverktyg har potentialen att göra våra liv enklare, inklusive att förbättra och anpassa innehåll, överbrygga språkbarriärer, öka produktiviteten och assistera med brainstorming. Men innan någon kan dra nytta av dessa verktyg, behöver de förstå hur de kan användas ansvarsfullt och etiskt. Klassrummet kan vara en del av lösningen. Det är en säker plats för studenter att lära, öva, ta chanser och växa med tekniken. Föreläsningssalen kan fungera som en utmärkt träningsplats för studenter att förstå dess etiska gränser, experimentera tryggt, lära sig att skilja mellan fakta och felaktig information och stärka kritiskt tänkande.

För att hjälpa utbildare och institutioner att navigera i den nya verkligheten, behöver de pålitliga partners som Turnitin, som förstår deras behov och studenternas behov. I själva verket började Turnitin att arbeta med att tillhandahålla utbildare med ett verktyg som ger dem insikt i användningen av AI-skrivande, så att de kan vägleda studenter att använda AI ansvarsfullt och stödja akademisk integritet, två år före den offentliga lanseringen av ChatGPT.

När AI utvecklas, kommer Turnitins produkter att göra det också. Nya funktioner kan integreras i befintliga produkter och arbetsflöden för enkelhetens skull för kunderna och en minskad inlärningskurva. Vi tillhandahåller regelbundet uppdaterade resurser för studenter, utbildare och institutioner för att hjälpa dem att navigera i denna nya teknologi och meningsbärande data.

Slutligen har många av våra anställda en bakgrund inom utbildning, vilket säkerställer att våra produkter är pedagogiskt sunda. Utan deras insikter skulle vi inte kunna möta de föränderliga behoven hos utbildare och administratörer. Med allt detta i åtanke kommer vår kommande “bevis för process”-lösning, som kommer att integreras i befintliga Turnitin-arbetsflöden, att ge både utbildare och studenter förtroende för arbetets äkthet.

Vilken råd skulle du ge till utbildare och institutioner som vill förbättra sina akademiska integritetspolicys i ansiktet av utvecklande AI-teknologier?

Min åsikt om akademiska policys är att ha flera AI-policys på olika institutionella nivåer är ett sätt att säkerställa att situationsspecifika nyanser beaktas. Till exempel kan en AI-policy för en kreativ skrivningsklass inte vara det bästa sättet att närma sig potentiell AI-användning på en forskningsuppsats. Instruktörer som skapar uppgiftsnivåpolicys bör tillhandahålla detaljer om acceptabel AI-användning baserat på uppgiftens lärandemål.

På institutionell nivå bör akademiska integritetspolicys vara breda med fokus på hur studenter representerar sitt arbete och citerar sina källor. Detta förhindrar avsiktligt plagiat samtidigt som det ger utrymme för nyanser som är förknippade med den unika situationen.

Över hela linjen är det avgörande att se bortom en enskild upptäcktsprocent. Våra verktyg är utformade för att stödja institutioner och utbildare, inte ersätta dem helt. Lärare känner sina studenter bäst och bör använda varje upptäckt av AI för att underlätta konstruktiva samtal om lämplig AI-användning och kritiskt tänkande.

För att bäst stödja utbildare har Turnitin också en omfattande samling resurser och ett expansivt lärarnätverk tillgängligt för att hjälpa institutioner att bygga ut sina policys, inklusive en fritt tillgänglig guide som delar detaljerade insikter om hur man granskar och reviderar befintliga akademiska integritetspolicys för att hantera hot från AI, tillgänglig online för nedladdning utan extra kostnad. Tack för den underbara intervjun, läsare som vill lära sig mer bör besöka Turnitin.