Annie Chechitelli, Chief Product Officer hos Turnitin – Interview Serie

Annie Chechitelli er Chief Product Officer hos Turnitin, hvor hun overvåger Turnitin-suitten af applikationer, herunder akademisk integritet, karaktergivning og feedback samt vurderingsfunktioner.

Turnitin er et globalt firma, der er dedikeret til at sikre integriteten af uddannelse og meningsfuldt forbedre læringsresultater. I 25 år har Turnitin samarbejdet med uddannelsesinstitutioner for at fremme ærlighed, konsekvens og fairplay på tværs af alle fagområder og vurderingstyper. Turnitin-produkter bruges af uddannelsesinstitutioner og certificerings- og licensprogrammer til at opretholde integritet og øge læringspræstation, og af studerende og fagfolk til at levere deres bedste, originale arbejde.

Hvordan har introduktionen af AI-skriveværktøjer som ChatGPT påvirket akademisk integritet?

ChatGPT’s verdensomspændende tilgængelighed har skabt nye muligheder for akademisk mislighed, herunder AI-genereret skrivning, plagiat og parafrasering, i en massestørrelse, der kun fortsætter med at vokse. For undervisere er det kun blevet sværere at skelne mellem AI- og menneskeskabt indhold. Derfor går det langt ud over detektion at sikre, at studerende laver deres bedste, originale arbejde. Undervisere har brug for muligheden for at gribe ind, før mislighed sker, for at styrke akademisk integritet og etisk skrivning.

På Turnitin er vi dedikeret til at hjælpe studerende og undervisere med at forstå AI’s rolle i uddannelse, herunder identificering af mislighedsproblemer og vurdering af, hvordan det bedst kan integreres i klasselokalet. Når man ser på AI-skrivning i uddannelse gennem linsen på ét enkelt puslespil – identificering af AI-skrivning i studerendes indsendelser – går institutioner og undervisere glip af det fulde billede, fordi AI også kan være til gavn for læring. Denne teknologi har muligheden for at supplere menneskelige ideer og facilitere en dybere forståelse af komplekse emner, hvis den bruges korrekt. AI er i sig selv ikke en trussel mod originalt tænkning eller akademisk integritet, så længe studerende ved, hvordan de skal bruge værktøjerne på en etisk måde. Det er underviseres ansvar at hjælpe deres studerende med at give dem vejledning om, hvad der er og ikke er en tilladt brug af teknologien – en kompetence, der vil hjælpe dem ud over klasselokalet og ind i deres fremtidige professioner.

Hvad specifikke udfordringer står undervisere overfor i forbindelse med detektion af AI-genereret og parafraseret indhold?

Studerende på højere uddannelsesinstitutioner bruger AI i langt højere grad end undervisere. Turnitin har samarbejdet med Tyton Partners* og fundet, at 59% af de adspurgte studerende siger, de bruger AI-skriveværktøjer mindst en gang om måneden, mens 40% af administratorerne og 36% af underviserne gør det. Mangel på bekendtskab med disse værktøjer efterlader undervisere i uvished om AI’s evner og begrænsninger.

Derudover handler AI-brug ikke kun om AI-genereret indhold længere. AI-parafrasering er taget fart, og det er den seneste metode, nogle bruger for at undgå detektion. Undervisere har brug for værktøjer, der holder trit med AI’s seneste fremskridt og giver indsigt i en students arbejdsproces og tankegang.

Disse funktioner er ikke ment til at erstatte underviserens professionelle skøn, men snarere til at supplere med yderligere indsigt for at hjælpe med at træffe en beslutning. Rapporter, som vores, giver data og ressourcer til at støtte en proces for at arbejde med studerende, ikke bestemmelse af mislighed.

I stedet er vores AI-skrivning- og parafraseringværktøjer designede til at støtte undervisere i at igangsætte konstruktive samtaler med studerende om vigtigheden af etisk skrivning og korrekt brug af parafraseringsmetoder.

Vi bygger også en ny løsning til studenters skrivning for at give både undervisere og studerende tillid til, at arbejdet er ægte, ved at fokusere på “bevis for proces”. Kombineret med vores eksisterende plagiat- og AI-tjek, er vores mål med denne løsning at give undervisere tillid og indsigt uden byrde og tilbyde studerende tryghed i, at deres hårdt arbejde ikke vil blive vurderet udelukkende på basis af en score. Denne løsning vil blive brugt af et udvalg af universiteter senere i år.

*Turnitin var partner i at yde kompensation til at gennemføre Tyton’s Time for Class 2024: Unlocking Access to Effective Digital Teaching & Learning.

Kan du forklare, hvordan Turnitins nye AI-parafrasering-detektionsfunktion fungerer?

AI-parafrasering refererer til processen med at bruge AI-teknologi til at omskrive tekst, mens man bevarede den oprindelige betydning. Disse AI-drevne værktøjer, også kendt som tekstspinners, analyserer inputteksten og genererer alternative versioner, der formidler den samme information ved hjælp af forskellige ord eller sætningsstrukturer. Målet er at gøre AI-genereret tekst upåagtet.

Men Turnitins AI-parafrasering-detektionsfunktion identificerer tilfælde, hvor AI-parafrasering måske er blevet brugt til at modificere AI-genereret tekst i indsendt indhold, hvilket hjælper udgivere og undervisere med at opretholde integriteten af forskningsskrivning og fremme ægte læringsoplevelser for studerende.

Inden for platformen fremhæver AI-skrivningsrapporten tekstsegmenterne, som modellen forudser, er blevet skrevet af et AI-værktøj. Separat fremhæver den også AI-genereret tekst, der måske er blevet yderligere modificeret ved hjælp af et AI-parafraseringværktøj, så undervisere og udgivere kan forstå nuancerne ved detektion.

Hvordan har dine tidligere roller hos AWS og Amazon, især inden for uddannelses-teknologi og digital indholdsdistribution, påvirket din tilgang til udvikling og forbedring af Turnitins AI-parafrasering-detektionsfunktion?

Gennem hele min karriere har jeg altid fokuseret på en kunde-først-mentalitet: konstant udvikling, respons på markedet og identificering af kundebehov og feedback. Dette er en mentalitet, jeg har medtaget i min rolle hos Turnitin, og som er centrum for vores produktstrategi.

Teknologien har altid udviklet sig i en hurtig takt, og det samme kan siges om AI. Efter lanceringen af vores AI-skrivnings-detektor hørte Turnitin fra undervisere verden over, at studerende forsøgte at omgå detektion ved at bruge parafraseringsværktøjer. Studerende og forskere måske havde brugt AI-parafrasering til at modificere AI-genereret indhold, herunder indhold produceret af sprogmodeller som ChatGPT, i et forsøg på at undgå detektion af AI-detektionssoftware.

I stedet udviklede vi vores AI-parafraseringværktøj i juli 2023 for at løse dette problem ved at identificere tilfælde, hvor AI-parafrasering måske er blevet brugt til at modificere AI-genereret tekst i indsendt indhold. Vores mål er at hjælpe udgivere og undervisere med at opretholde integriteten af forskningsskrivning og fremme ægte læringsoplevelser for studerende, især før skoleåret 2024-2025.

På hvilke måder kan Turnitin Originality hjælpe institutioner med at opretholde høje standarder for akademisk integritet midt i opblomstringen af AI-skrivning og kontrakt-svindel?

Turnitin Originality har sat en helt ny standard for akademisk integritet for både studerende og undervisere. Den går ud over plagiat til at tackle nye og skiftende former for mislighed, som AI-skrivning, kontrakt-svindel og parafrasering, og giver undervisere klare, handlebare data til at spore studentpræstationer på tværs af deres kohorte og vurdering af potentielle mislighedsproblemer.

Studerende modtager også støtte gennem realtidsformative feedback på deres arbejde. Originality sammenligner tekstlighed, grammatik og citater, mens studerende arbejder, hvilket hjælper dem med at korrigere og undgå utilsigtet plagiat, før endelig indsendelse.

Hvad for feedback har du modtaget fra undervisere og institutioner om effekten af Turnitins AI-skrivnings- og parafrasering-detektionsværktøjer?

For nylig havde Turnitin en samtale med Dr. Leslie Layne, en adjungeret professor på University of Lynchburg, Virginia (USA). Layne har undervist i 76 freshman-skrivningsklasser og har brugt Turnitin, siden hun startede på universitetet i efteråret 2004.

Når hun ser tilbage på udfordringerne før introduktionen af effektive AI-skrivnings-detektionsværktøjer, husker Layne, “Det var virkelig tidskrævende at kopiere og indsætte tekst i online-detektioner.” Denne proces, selvom den var nødvendig, var langt fra effektiv og 100% præcis, hvilket understreger behovet for mere strømlinet og pålidelige løsninger. Introduktionen af Turnitins AI-skrivnings-detektionsværktøj var en game-changer, der gav konsekvens og en meget nødvendig let proces.

“Vurdering af essays tager tid. Jeg er meget fint stemt til den mængde tid, det tager at få gjort, hvad jeg skal, så jeg var absolut begejstret for at høre, at Turnitin integrerede AI-skrivnings-detektion, fordi alt så var på ét sted,” sagde Layne.

Et centralt tema i Laynes tilgang er den konstruktive brug af AI i uddannelse. I stedet for at se AI som en trussel mod akademisk integritet, forkaster hun integrationen af AI i læringsprocessen. “Jeg underviser med AI i min freshman-skrivningsklasse, så jeg får dem til at bruge ChatGPT i næsten hver time,” forklarer hun. Denne praktiske tilgang med AI udstyrer studerende med færdighederne til at navigere og udnytte disse værktøjer både effektivt og etisk.

Hvordan integrerer Draft Coach™-funktionen med Turnitins andre værktøjer for at støtte studerende i at producere originalt arbejde og forbedre deres skrivningsfærdigheder?

Draft Coach™-funktionen findes inden for Originality-produktet. Ligesom Originality støtter lærere i at opretholde akademisk integritet, giver Draft Coach studerende vejledning om, hvordan de kan forbedre deres akademiske skrivnings- og forskningsfærdigheder på alle tidspunkter. Øjeblikkeligt feedback på tekstlighed, grammatik og parafrasering hjælper dem med at undgå utilsigtet plagiat.

Hvilken rol ser du AI spille i fremtidens akademiske integritet, og hvordan forbereder Turnitin sig på at tackle potentielle nye udfordringer?

AI-skriveværktøjer har potentialet for at gøre vores liv lettere, herunder forbedre og tilpasse indhold, brokke sprogbarrierer, øge produktivitet og hjælpe med brainstorming. Men før nogen kan nyde fordelene ved disse værktøjer, må de forstå, hvordan de skal bruges på en ansvarlig og etisk måde. Klasselokalet kan være en del af løsningen. Det er et sikkert rum, hvor studerende kan lære, praktisere, tage chancer og vokse med teknologien. Forelæsningssalen kan fungere som et fremragende træningsområde for studerende til at forstå dens etiske grænser, eksperimentere sikkert, lære at skelne mellem fakta og forkert information og styrke kritisk tænkning.

For at hjælpe undervisere og institutioner med at navigere i den nye virkelighed, har de brug for pålidelige partnere som Turnitin, der forstår deres behov og behovene hos deres studerende. Faktisk to år før den offentlige lancering af ChatGPT begyndte Turnitin at arbejde på, hvordan man kunne give undervisere et værktøj, der giver dem indsigt i brugen af AI-skrivning, så de kan vejlede studerende i at bruge AI ansvarligt og støtte akademisk integritet.

Da AI udvikler sig, vil Turnitins produkter også. Nye funktioner kan let integreres i eksisterende produkter og arbejdsprocesser for at lette kundernes brug og reducere læringssvigtet. Vi tilbyder regelmæssigt opdaterede ressourcer for studerende, undervisere og institutioner for at hjælpe dem med at navigere i denne nye teknologi og sætningsspecifikke detektionsdata.

Endelig har mange af vores medarbejdere en baggrund i uddannelse, hvilket sikrer, at vores produkter er pædagogisk funderede. Uden deres indsigt ville vi ikke være i stand til at møde de udviklende behov hos undervisere og administratorer. Med alt dette i mente vil vores kommende “bevis for proces”-løsning, der vil blive integreret i eksisterende Turnitin-arbejdsprocesser, give både undervisere og studerende tillid til, at arbejdet er ægte.

Hvad råd ville du give til undervisere og institutioner, der søger at forbedre deres akademiske integritetspolitikker i lyset af udviklende AI-teknologier?

Min holdning til akademiske politikker er, at det at have flere AI-politikker på forskellige institutionelle niveauer er en nøgle til at sikre, at situationsspecifikke nuancer bliver taget i betragtning. For eksempel kan en AI-politik for en kreativ skrivningsklasse ikke være den bedste måde at tilgå potentiel AI-brug på en forskningsrapport. Instruktører, der skaber opgave-niveau-politikker, bør give detaljer om acceptabel AI-brug baseret på opgavens læringsmål.

På institutionelt niveau bør akademiske integritetspolitikker være brede og fokuserede på, hvordan studerende repræsenterer deres arbejde og citerer deres kilder. Dette forhindrer intentionelt plagiat, mens det giver plads til nuancer forbundet med den unikke situation.

Overalt er det afgørende at se beyond en enkelt detektionsprocent. Vores værktøjer er designede til at støtte institutioner og undervisere, ikke til at erstatte dem fuldstændigt. Lærere kender deres studerende bedst, og bør bruge enhver AI-detektion til at facilitere konstruktive samtaler om passende AI-brug og kritisk tænkning.

For at bedst støtte undervisere har Turnitin også en omfattende samling af ressourcer og et udvidet lærernetværk til rådighed for at hjælpe institutioner med at bygge deres politikker op, herunder en klar vejledning, der deler detaljerede indsigt i, hvordan man gennemgår og reviderer eksisterende akademiske integritetspolitikker for at tackle trusler fra AI, til rådighed online til download gratis.

Tak for det gode interview, læsere, der ønsker at lære mere, skal besøge Turnitin.