Annie Chechitelli, Chief Product Officer bij Turnitin – Interview Serie

Annie Chechitelli is de Chief Product Officer bij Turnitin, waar zij toezicht houdt op de Turnitin-suite van toepassingen, waaronder academische integriteit, beoordeling en feedback, en beoordelingsmogelijkheden.

Turnitin is een wereldwijd bedrijf dat zich inzet voor het waarborgen van de integriteit van het onderwijs en het verbeteren van de leerresultaten. Gedurende 25 jaar heeft Turnitin samengewerkt met onderwijsinstellingen om eerlijkheid, consistentie en billijkheid te bevorderen in alle vakgebieden en beoordelingstypen. Turnitin-producten worden gebruikt door onderwijsinstellingen en certificerings- en licentieprogramma’s om de integriteit te handhaven en de leerprestaties te verbeteren, en door studenten en professionals om hun beste, originele werk te doen.

Hoe heeft de introductie van AI-schrijfgereedschappen zoals ChatGPT de academische integriteit beïnvloed?

De wereldwijde toegankelijkheid van ChatGPT heeft nieuwe mogelijkheden voor academische onregelmatigheden gecreëerd, waaronder AI-gegenereerde schrijfgereedschappen, plagiaat en parafraseren, op een enorme schaal die alleen maar blijft groeien. Voor docenten wordt het steeds moeilijker om te onderscheiden tussen AI- en door de mens gegenereerde inhoud. Als gevolg daarvan gaat het waarborgen dat studenten hun beste, originele werk maken, verder dan alleen detectie. Docenten moeten de mogelijkheid hebben om in te grijpen voordat onregelmatigheden plaatsvinden, om academische integriteit en ethische schrijfpraktijken te versterken. AI is hier om te blijven, en de nieuwe tijd van academische integriteit vereist een grondig begrip van zowel studenten als docenten over hoe AI verantwoordelijk kan worden gebruikt om menselijk leren en besluitvorming te ondersteunen.

Bij Turnitin zijn we toegewijd om studenten en docenten te helpen begrijpen wat de rol van AI in het onderwijs is, waaronder het identificeren van onregelmatigheden en het beoordelen van hoe het het beste in de klas kan worden geïntegreerd. Door AI-schrijfgereedschappen in het onderwijs te bekijken door de lens van slechts één puzzelstuk – het identificeren van AI-schrijfgereedschappen in studentenopdrachten – missen instellingen en docenten het volledige beeld, omdat AI het leren ook kan ondersteunen. Deze technologie heeft de mogelijkheid om menselijke ideeën te versterken en een groter begrip van complexe onderwerpen te faciliteren als het op de juiste manier wordt gebruikt. AI zelf is geen bedreiging voor origineel denken of academische integriteit, zolang studenten weten hoe ze de gereedschappen ethisch moeten gebruiken. Het is de verantwoordelijkheid van docenten om hun studenten de richtlijnen te geven over wat wel en niet een toegestane gebruik van de technologie is – een vaardigheid die hen zal helpen voorbij de klas en in hun toekomstige beroepen.

Welke specifieke uitdagingen stellen docenten voor bij het detecteren van AI-gegenereerde en geparafraaseerde inhoud?

Het gebruik van AI door studenten in het hoger onderwijs overtreft het gebruik van AI door docenten. Turnitin heeft samengewerkt met Tyton Partners* en ontdekte dat 59% van de ondervraagde studenten zei dat ze AI-schrijfgereedschappen minstens één keer per maand gebruiken, terwijl 40% van de beheerders en 36% van de instructeurs dit doen. Een gebrek aan vertrouwdheid met deze gereedschappen laat docenten in het ongewisse over de mogelijkheden en beperkingen van AI.

Bovendien gaat AI-gebruik niet alleen meer over AI-gegenereerde inhoud. AI-parafraseren is in opkomst en is de laatste methode die sommigen gebruiken om detectie te vermijden. Docenten hebben ondersteunende gereedschappen nodig die gelijke tred houden met de laatste ontwikkelingen van AI en inzicht bieden in de workflow en het denkproces van een student.

Deze functies zijn niet bedoeld om de professionele beoordelingsvermogen van de docent te vervangen, maar om aanvullende inzichten te bieden om een beslissing te nemen. Rapporten, zoals de onze, bieden gegevenspunten en bronnen om een proces van werken met studenten te ondersteunen, niet om onregelmatigheden te bepalen.

In plaats daarvan zijn onze AI-schrijf- en parafraseringsgereedschappen ontworpen om docenten te ondersteunen bij het initiëren van constructieve gesprekken met studenten over de belangrijkheid van ethische schrijfpraktijken en de juiste gebruik van parafrasetechnieken.

We zijn ook een nieuwe oplossing voor studentenschrijfgereedschappen aan het bouwen om zowel docenten als studenten vertrouwen te geven in de authenticiteit van het werk door te focussen op “bewijs van proces”. In combinatie met onze bestaande plagiaat- en AI-controles, is ons doel met deze oplossing om docenten vertrouwen en inzicht te geven zonder last, en studenten comfort te bieden in de wetenschap dat hun harde werk niet alleen wordt beoordeeld op basis van een score. Dat product zal later dit jaar door een selecte groep universiteiten worden gebruikt.

*Turnitin was een partner in het verstrekken van compensatie om Tyton’s Time for Class 2024: Unlocking Access to Effective Digital Teaching & Learning uit te voeren.

Kunt u uitleggen hoe Turnitin’s nieuwe AI-parafraseringsdetectiefunctie werkt?

AI-parafraseren verwijst naar het proces van het gebruiken van AI-technologie om tekst te herschrijven terwijl de oorspronkelijke betekenis behouden blijft. Deze AI-gebaseerde gereedschappen, ook wel tekstspinners genoemd, analyseren de invoertekst en genereren alternatieve versies die dezelfde informatie overbrengen met behulp van andere woorden of zinsstructuren. Het doel – om AI-gegenereerde tekst ondetecteerbaar te maken.

De AI-parafraseringsdetectiefunctie van Turnitin identificeert gevallen waarin AI-parafraseren mogelijk is gebruikt om AI-gegenereerde tekst in ingediende inhoud te modificeren, waardoor uitgevers en docenten de integriteit van onderzoekspublicaties en authentieke leerervaringen voor studenten kunnen waarborgen.

Binnen het platform benadrukt het AI-schrijfrapport de tekstsegmenten die het model voorspelt waarschijnlijk door een AI-gereedschap zijn geschreven. Afzonderlijk benadrukt het ook AI-gegenereerde tekst die mogelijk is gemodificeerd met een AI-parafraseringsgereedschap, zodat docenten en uitgevers de nuances van detectie kunnen begrijpen.

Hoe hebben uw voorgaande rollen bij AWS en Amazon, met name in educatieve technologie en digitale contentdistributie, uw aanpak beïnvloed bij het ontwikkelen en verbeteren van Turnitin’s AI-parafraseringsdetectiefunctie?

Tijdens mijn hele carrière heb ik me altijd gericht op de klantgerichte mentaliteit: constant evolueren, reageren op de markt en identificeren van klantbehoeften en feedback. Dit is een mentaliteit die ik met me mee heb genomen in mijn rol bij Turnitin en die centraal staat in onze productontwikkelingsstrategie.

Technologie is altijd snel in ontwikkeling en hetzelfde kan worden gezegd over AI. Na de lancering van onze AI-schrijfdetector, kreeg Turnitin van docenten over de hele wereld te horen dat studenten probeerden de detectie te omzeilen door parafraseringsgereedschappen te gebruiken. Studenten en onderzoekers kunnen AI-parafraseren hebben gebruikt om AI-gegenereerde inhoud, inclusief inhoud die is gegenereerd door taalmodellen zoals ChatGPT, te modificeren in een poging om detectie door AI-detectiesoftware te vermijden.

Als reactie daarop hebben we in juli 2023 onze AI-parafraseringsgereedschap ontwikkeld om dit probleem aan te pakken door gevallen te identificeren waarin AI-parafraseren mogelijk is gebruikt om AI-gegenereerde tekst in ingediende inhoud te modificeren. Ons doel is om uitgevers en docenten te helpen de integriteit van onderzoekspublicaties te waarborgen en authentieke leerervaringen voor studenten te ondersteunen, vooral voorafgaand aan het schooljaar 2024-2025.

Op welke manieren kan Turnitin Originality instellingen helpen bij het handhaven van hoge standaarden van academische integriteit te midden van de opkomst van AI-schrijfgereedschappen en contractueel bedrog?

Turnitin Originality heeft een geheel nieuwe standaard gezet voor academische integriteit voor zowel studenten als docenten. Het gaat verder dan plagiaat om nieuwe en veranderende vormen van onregelmatigheden aan te pakken, zoals AI-schrijfgereedschappen, contractueel bedrog en parafraseren, en biedt docenten duidelijke, actiegerichte gegevens voor het volgen van studentenprestaties in hun cohort en het beoordelen van potentiële onregelmatigheden.

Studenten ontvangen ook ondersteuning via real-time formatieve feedback op hun werk. Originality vergelijkt tekstovereenkomst, grammatica en citaten terwijl studenten werken, waardoor ze correcties kunnen aanbrengen en onbewust plagiaat kunnen vermijden voordat ze hun definitieve versie indienen.

Wat voor feedback heeft u ontvangen van docenten en instellingen over de effectiviteit van Turnitin’s AI-schrijf- en parafraseringsdetectiegereedschappen?

Onlangs sprak Turnitin met Dr. Leslie Layne, een associate professor aan de University of Lynchburg, Virginia (VS). Layne heeft 76 freshman-schrijfklassen gedoceerd en gebruikt Turnitin sinds ze in de herfst van 2004 aan de universiteit begon.

Terugkijkend op de uitdagingen vóór de komst van efficiënte AI-schrijfdetectiegereedschappen, herinnert Layne zich: “Het was echt tijdrovend om tekst te kopiëren en plakken in online detectors.” Dit proces, hoewel noodzakelijk, was verre van efficiënt en 100% nauwkeurig, waardoor de behoefte aan meer gestroomlijnde en betrouwbare oplossingen werd onderstreept. De introductie van Turnitin’s AI-schrijfdetectiegereedschap was een game-changer, waardoor consistentie en een veel nodigde gemakkelijke proces ontstond.

“Het beoordelen van essays kost tijd. Ik ben zeer gefocust op de hoeveelheid tijd die nodig is om te doen wat ik moet doen, dus ik was absoluut verheugd om te horen dat Turnitin AI-schrijfdetectie integreerde, omdat alles dan op één plek staat,” zei Layne.

Een centraal thema in Layne’s aanpak is het constructieve gebruik van AI in het onderwijs. In plaats van AI te zien als een bedreiging voor academische integriteit, pleit ze voor de integratie ervan in het leerproces. “Ik geef les met AI in mijn freshman-schrijfklassen, dus ik laat ze ChatGPT gebruiken in bijna elke lesperiode,” legt ze uit. Deze hands-on aanpak met AI richt studenten op met de vaardigheden om deze gereedschappen effectief en ethisch te navigeren en te gebruiken.

Hoe integreert de Draft Coach™-functie met Turnitin’s andere gereedschappen om studenten te ondersteunen bij het produceren van origineel werk en het verbeteren van hun schrijfvaardigheden?

De Draft Coach™-functie bestaat binnen het Originality-product. Net zoals Originality docenten ondersteunt bij het handhaven van academische integriteit, biedt Draft Coach studenten richtlijnen over hoe ze hun academische schrijf- en onderzoeksvaardigheden kunnen verbeteren op elk moment. Onmiddellijke feedback over tekstovereenkomst, grammatica en parafraseren helpt hen onbewust plagiaat te vermijden.

Welke rol ziet u voor AI in de toekomst van academische integriteit, en hoe bereidt Turnitin zich voor om potentiële nieuwe uitdagingen aan te pakken?

AI-schrijfgereedschappen hebben het potentieel om ons leven gemakkelijker te maken, waaronder het verbeteren en aanpassen van inhoud, taalbarrières overbruggen, productiviteit verhogen en helpen bij brainstormen. Echter, voordat iemand de voordelen van deze gereedschappen kan plukken, moeten ze eerst leren hoe ze ze verantwoordelijk en ethisch kunnen gebruiken. De klas kan deel uitmaken van de oplossing. Het is een veilige ruimte voor studenten om te leren, te oefenen, risico’s te nemen en te groeien met technologie. De collegezaal kan dienen als een uitstekende oefenruimte voor studenten om de ethische grenzen te leren begrijpen, veilig te experimenteren, feiten van onnauwkeurige informatie te leren onderscheiden en kritisch denken te versterken.

Om docenten en instellingen te helpen de nieuwe realiteit te navigeren, hebben ze vertrouwde partners nodig, zoals Turnitin, die hun behoeften en die van hun studenten begrijpen. Feitelijk, twee jaar voordat ChatGPT openbaar werd gelanceerd, begon Turnitin te werken aan het bieden van docenten een gereedschap dat hen transparantie geeft in het gebruik van AI-schrijfgereedschappen, zodat ze studenten kunnen begeleiden om AI verantwoordelijk te gebruiken en academische integriteit te ondersteunen.

Naarmate AI evolueert, zullen Turnitin’s producten dat ook doen. Nieuwe functies kunnen gemakkelijk in bestaande producten en workflows worden geïntegreerd voor het gemak van de klant en een verlaagde leercurve. We bieden regelmatig bijgewerkte bronnen voor studenten, docenten en instellingen om hen te helpen deze nieuwe technologie te navigeren en zinsniveau-detectiegegevens.

Ten slotte hebben veel van onze medewerkers een achtergrond in onderwijs, wat ervoor zorgt dat onze producten pedagogisch solide zijn. Zonder hun inzichten zouden we de evoluerende behoeften van docenten en beheerders niet kunnen vervullen. Met al dit in gedachten zal onze komende “bewijs van proces”-oplossing, die zal worden geïntegreerd in bestaande Turnitin-workflows, docenten en studenten vertrouwen geven in de authenticiteit van het werk.

Wat voor advies zou u geven aan docenten en instellingen die hun academische integriteitsbeleid willen verbeteren in het licht van de evoluerende AI-technologieën?

Mijn mening over academische beleid is dat het hebben van meerdere AI-beleidsregels op verschillende institutionele niveaus een sleutel is om situatiespecifieke nuances te waarborgen. Bijvoorbeeld, een AI-beleid voor een creatief schrijfklassen kan niet de beste manier zijn om potentiële AI-gebruik op een onderzoeksrapport aan te pakken. Docenten die opdrachtbeleidsregels creëren, moeten details verstrekken over aanvaardbaar AI-gebruik op basis van de leerdoelen van de opdracht.

Op institutioneel niveau moeten academische integriteitsbeleidsregels breed zijn met een focus op hoe studenten hun werk presenteren en hun bronnen citeren. Dit voorkomt opzettelijk plagiaat en biedt ruimte voor nuances die zijn verbonden met de unieke situatie.

Over het algemeen is het cruciaal om te kijken naar meer dan alleen een enkele detectiepercentage. Onze gereedschappen zijn ontworpen om instellingen en docenten te ondersteunen, niet om ze volledig te vervangen. Docenten kennen hun studenten het beste en moeten elke detectie van AI gebruiken om productieve gesprekken te faciliteren over passend AI-gebruik en kritisch denken.

Om docenten het beste te ondersteunen, heeft Turnitin ook een uitgebreide bibliotheek met bronnen en een uitgebreid docentennetwerk beschikbaar om instellingen te helpen hun beleidsregels op te bouwen, waaronder een gemakkelijk toegankelijke gids die gedetailleerde inzichten deelt over hoe bestaande academische integriteitsbeleidsregels kunnen worden herzien om AI-bedreigingen aan te pakken, beschikbaar online voor gratis download.

Bedankt voor het geweldige interview, lezers die meer willen leren, moeten Turnitin bezoeken.