Annie Chechitelli, Chief Product Officer bei Turnitin – Interview-Serie

Annie Chechitelli ist die Chief Product Officer bei Turnitin, wo sie die Turnitin-Suite von Anwendungen überwacht, einschließlich akademischer Integrität, Noten und Feedback sowie Bewertungsfunktionen.

Turnitin ist ein globaler Unternehmen, das sich der Sicherstellung der Integrität der Bildung und der nachhaltigen Verbesserung der Lernergebnisse widmet. Seit 25 Jahren arbeitet Turnitin mit Bildungseinrichtungen zusammen, um Ehrlichkeit, Konsistenz und Fairness in allen Fachbereichen und Bewertungsarten zu fördern. Turnitin-Produkte werden von Bildungseinrichtungen und Zertifizierungs- und Lizenzprogrammen verwendet, um die Integrität zu wahren und die Lernleistung zu steigern, und von Schülern und Fachleuten, um ihre beste, originale Arbeit zu leisten.

Wie hat die Einführung von KI-Schreibttools wie ChatGPT die akademische Integrität beeinflusst?

Die weltweite Zugänglichkeit von ChatGPT hat neue potenzielle Möglichkeiten für akademisches Fehlverhalten geschaffen, einschließlich KI-generiertem Schreiben, Plagiaten und Paraphrasieren, in einem riesigen Umfang, der nur weiter wächst. Für Lehrkräfte wird es immer schwieriger, zwischen KI- und menschlich generiertem Inhalt zu unterscheiden. Daher geht es bei der Sicherstellung, dass Schüler ihre beste, originale Arbeit leisten, weit über die Erkennung hinaus. Lehrkräfte benötigen die Fähigkeit, vor dem Auftreten von Fehlverhalten einzugreifen, um die akademische Integrität und ethische Schreibpraktiken zu stärken. KI wird nicht verschwinden, und das neue Zeitalter der akademischen Integrität erfordert ein umfassendes Verständnis von Schülern und Lehrkräften, wie KI verantwortungsvoll zur Unterstützung des menschlichen Lernens und der Entscheidungsfindung eingesetzt werden kann.

Bei Turnitin sind wir dazu verpflichtet, Schülern und Lehrkräften zu helfen, die Rolle der KI in der Bildung zu verstehen, einschließlich der Identifizierung von Fehlverhalten und der Bewertung, wie sie am besten in den Unterricht integriert werden kann. Wenn Institutionen und Lehrkräfte KI-Schreiben in der Bildung durch die Linse eines einzigen Puzzlestücks betrachten – der Identifizierung von KI-Schreiben in den Einreichungen der Schüler -, verpassen sie das gesamte Bild, denn KI kann auch das Lernen unterstützen. Diese Technologie hat die Fähigkeit, menschliche Ideen zu ergänzen und ein besseres Verständnis komplexer Themen zu ermöglichen, wenn sie richtig eingesetzt wird. KI selbst ist keine Bedrohung für das originale Denken oder die akademische Integrität, solange Schüler wissen, wie sie die Tools ethisch einsetzen. Es ist die Verantwortung der Lehrkräfte, ihren Schülern Anleitung zu geben, was eine zulässige Verwendung der Technologie ist – eine Fähigkeit, die ihnen auch über den Unterricht hinaus in ihre zukünftigen Berufe helfen wird.

Welche spezifischen Herausforderungen stellen sich Lehrkräften bei der Erkennung von KI-generiertem und paraphrasierendem Inhalt?

Die Nutzung von KI durch Studierende in der Hochschulbildung übertrifft die Nutzung durch Lehrkräfte bei weitem. Turnitin hat mit Tyton Partners* zusammengearbeitet und festgestellt, dass 59 % der befragten Studierenden angaben, sie verwenden KI-Schreibttools mindestens einmal im Monat, während es bei Administratoren 40 % und bei Lehrkräften 36 % waren. Ein Mangel an Vertrautheit mit diesen Tools lässt Lehrkräfte im Dunkeln über die Fähigkeiten und Grenzen von KI.

Zusätzlich ist die Nutzung von KI nicht mehr nur auf KI-generierten Inhalt beschränkt. KI-Paraphrasieren hat sich durchgesetzt und ist die neueste Methode, die einige verwenden, um die Erkennung zu vermeiden. Lehrkräfte benötigen Support-Tools, die mit den neuesten Fortschritten der KI Schritt halten und Einblicke in den Arbeitsablauf und die Denkprozesse der Schüler geben.

Diese Funktionen sollen nicht die professionelle Entscheidungskompetenz der Lehrkräfte ersetzen, sondern vielmehr zusätzliche Erkenntnisse liefern, um zu einer Entscheidung zu gelangen. Berichte wie unserer liefern Datenpunkte und Ressourcen, um den Prozess der Zusammenarbeit mit Schülern zu unterstützen, nicht um Fehlverhalten festzustellen.

Stattdessen sind unsere KI-Schreib- und Paraphrasier-Tools darauf ausgelegt, Lehrkräfte bei der Initiierung konstruktiver Gespräche mit Schülern über die Bedeutung ethischer Schreibpraktiken und die richtige Verwendung von Paraphrasier-Techniken zu unterstützen.

Wir entwickeln auch eine neue Lösung für das Schreiben von Schülern, um sowohl Lehrkräften als auch Schülern Vertrauen in die Echtheit der Arbeit zu geben, indem wir uns auf “Beweis des Prozesses” konzentrieren. In Kombination mit unseren bestehenden Plagiat- und KI-Überprüfungen ist unser Ziel mit dieser Lösung, Lehrkräften Vertrauen und Einblicke ohne Belastung zu bieten und Schülern die Gewissheit zu geben, dass ihre harte Arbeit nicht allein durch eine Punktzahl beurteilt wird. Dieses Produkt wird von einer Auswahl von Universitäten später in diesem Jahr verwendet.

*Turnitin war Partner bei der Bereitstellung von Entschädigungen, um Tyton’s Time for Class 2024: Unlocking Access to Effective Digital Teaching & Learning durchzuführen.

Können Sie erklären, wie Turnitins neues KI-Paraphrasier-Erkennungsfeature funktioniert?

KI-Paraphrasieren bezieht sich auf den Prozess der Verwendung von KI-Technologie, um Texte umzuschreiben, während die ursprüngliche Bedeutung beibehalten wird. Diese KI-gestützten Tools, auch Text-Spinner genannt, analysieren den Eingabetext und generieren alternative Versionen, die dieselbe Information mit unterschiedlichen Worten oder Satzstrukturen vermitteln. Das Ziel – KI-generierten Text unerkannt zu lassen.

Jedoch identifiziert Turnitins KI-Paraphrasier-Erkennungsfeature Instanzen, in denen KI-Paraphrasieren möglicherweise verwendet wurde, um KI-generierten Text in eingereichten Inhalten zu modifizieren, um Herausgebern und Lehrkräften zu helfen, die Integrität des wissenschaftlichen Schreibens und authentische Lernerfahrungen für Schüler zu wahren.

Im Rahmen der Plattform hebt der KI-Schreibbericht die Textsegmente hervor, die das Modell vorhersagt, dass sie wahrscheinlich von einem KI-Tool geschrieben wurden. Separat hebt es auch KI-generierten Text hervor, der möglicherweise mithilfe eines KI-Paraphrasier-Tools modifiziert wurde, damit Lehrkräfte und Herausgeber die Nuancen der Erkennung verstehen können.

Wie haben Ihre vorherigen Rollen bei AWS und Amazon, insbesondere im Bereich Bildungstechnologie und digitale Inhaltsverteilung, Ihre Herangehensweise an die Entwicklung und Verbesserung von Turnitins KI-Paraphrasier-Erkennungsfeature beeinflusst?

Während meiner gesamten Karriere habe ich mich immer auf eine kundenorientierte Mentalität konzentriert: ständig evolvieren, auf den Markt reagieren und Kundenbedürfnisse und -feedback identifizieren. Dies ist eine Mentalität, die ich in meine Rolle bei Turnitin mitgebracht habe und die im Herzen unserer Produktentwicklungsstrategie steht.

Technologie hat sich immer schnell verändert und das gleiche gilt für KI. Nach dem Launch unseres KI-Schreibdetektors hörte Turnitin von Lehrkräften auf der ganzen Welt, dass Schüler versuchten, die Erkennung zu umgehen, indem sie Paraphrasier-Tools verwendeten. Schüler und Forscher könnten KI-Paraphrasieren verwendet haben, um KI-generierten Inhalt, einschließlich Inhalten, die von Sprachmodellen wie ChatGPT produziert wurden, zu modifizieren, um die Erkennung durch KI-Erkennungssoftware zu vermeiden.

Daher entwickelten wir unser KI-Paraphrasier-Tool im Juli 2023, um dieses Problem anzugehen, indem wir Instanzen identifizieren, in denen KI-Paraphrasieren möglicherweise verwendet wurde, um KI-generierten Text in eingereichten Inhalten zu modifizieren. Unser Ziel ist es, Herausgebern und Lehrkräften zu helfen, die Integrität des wissenschaftlichen Schreibens und authentische Lernerfahrungen für Schüler zu wahren, insbesondere vor dem Schuljahr 2024-2025.

Wie kann Turnitin Originality Institutionen dabei helfen, hohe Standards der akademischen Integrität trotz des Aufkommens von KI-Schreiben und Auftragsbetrug zu wahren?

Turnitin Originality hat einen völlig neuen Standard für akademische Integrität für Schüler und Lehrkräfte gesetzt. Es geht über Plagiate hinaus und behandelt neue und veränderte Formen von Fehlverhalten, wie KI-Schreiben, Auftragsbetrug und Paraphrasieren, und bietet Lehrkräften klare, handhabbare Daten für die Verfolgung der Schülerleistung über ihre Kohorte und die Bewertung potenzieller Fehlverhaltensprobleme.

Schüler erhalten auch Unterstützung durch Echtzeit-Formativ-Feedback zu ihrer Arbeit. Originality vergleicht Textähnlichkeit, Grammatik und Zitate, während die Schüler arbeiten, und hilft ihnen, Korrekturen vorzunehmen und unbeabsichtigtes Plagiat vor der endgültigen Einreichung zu vermeiden.

Welches Feedback haben Sie von Lehrkräften und Institutionen zur Effektivität von Turnitins KI-Schreib- und Paraphrasier-Erkennungstools erhalten?

Kürzlich sprach Turnitin mit Dr. Leslie Layne, einer außerordentlichen Professorin an der University of Lynchburg, Virginia (USA). Layne hat 76 Freshman-Schreibklassen unterrichtet und verwendet Turnitin seit ihrem Beginn an der Universität im Herbst 2004.

Bei der Betrachtung der Herausforderungen vor der Einführung effizienter KI-Schreib-Erkennungstools erinnert Layne sich: “Es war wirklich zeitaufwändig, Text in Online-Detektoren zu kopieren und einzufügen.” Dieser Prozess, obwohl notwendig, war weit von effizient und 100 % genau entfernt, was die Notwendigkeit von strömenderen und zuverlässigeren Lösungen unterstreicht. Die Einführung von Turnitins KI-Schreib-Erkennungstool war ein Game-Changer, der Konsistenz und einen dringend benötigten Prozess bot.

“Das Korrigieren von Aufsätzen dauert Zeit. Ich bin sehr fein abgestimmt auf die Zeit, die es braucht, um das zu erledigen, was ich erledigen muss, also war ich absolut begeistert, zu hören, dass Turnitin KI-Schreib-Erkennung integriert, weil dann alles an einem Ort ist”, sagte Layne.

Ein zentrales Thema in Laynes Ansatz ist die konstruktive Verwendung von KI in der Bildung. Anstatt KI als Bedrohung für die akademische Integrität zu betrachten, spricht sie sich für ihre Integration in den Lernprozess aus. “Ich unterrichte mit KI in meinem Freshman-Schreibunterricht, also lasse ich sie in fast jedem Unterricht KI verwenden”, erklärt sie. Dieser hands-on-Ansatz mit KI ermöglicht es Schülern, die Fähigkeiten zu erwerben, diese Tools effektiv und ethisch zu nutzen.

Wie integriert sich die Draft Coach™-Funktion in Turnitins andere Tools, um Schülern bei der Erstellung von Originalarbeit und der Verbesserung ihrer Schreibfähigkeiten zu unterstützen?

Die Draft Coach™-Funktion existiert innerhalb des Originality-Produkts. Wie Originality Lehrkräfte bei der Wahrung der akademischen Integrität unterstützt, bietet Draft Coach Schülern Anleitung, wie sie ihre akademischen Schreib- und Forschungsfähigkeiten zu jedem Zeitpunkt verbessern können. Sofortiges Feedback zu Textähnlichkeit, Grammatik und Paraphrasieren hilft ihnen, unbeabsichtigtes Plagiat zu vermeiden.

Welche Rolle sehen Sie KI in der Zukunft der akademischen Integrität spielen, und wie bereitet sich Turnitin auf potenzielle neue Herausforderungen vor?

KI-Schreibttools haben das Potenzial, unser Leben einfacher zu machen, einschließlich der Verbesserung und Anpassung von Inhalten, der Überbrückung von Sprachbarrieren, der Steigerung der Produktivität und der Unterstützung bei der Ideenfindung. Bevor jedoch jemand die Vorteile dieser Tools nutzen kann, müssen sie lernen, sie verantwortungsvoll und ethisch zu verwenden. Der Klassenraum kann Teil der Lösung sein. Er ist ein sicherer Raum, in dem Schüler lernen, experimentieren, Risiken eingehen und mit der Technologie wachsen können. Der Hörsaal kann als großartiges Trainingsfeld für Schüler dienen, um die ethischen Grenzen zu verstehen, sicher zu experimentieren, zwischen Fakten und ungenauen Informationen zu unterscheiden und kritische Denkfähigkeiten zu stärken.

Um Lehrkräften und Institutionen zu helfen, die neue Realität zu meistern, benötigen sie vertrauenswürdige Partner wie Turnitin, die ihre Bedürfnisse und die ihrer Schüler verstehen. Tatsächlich begann Turnitin zwei Jahre vor der öffentlichen Veröffentlichung von ChatGPT damit, zu entwickeln, wie man Lehrkräften ein Tool an die Hand geben kann, das ihnen Transparenz über die Verwendung von KI-Schreiben bietet, damit sie Schülern helfen können, KI verantwortungsvoll zu nutzen und die akademische Integrität zu unterstützen.

Wenn KI evolviert, werden auch Turnitins Produkte evolvieren. Neue Funktionen können leicht in bestehende Produkte und Workflows integriert werden, um den Gebrauch durch die Kunden zu erleichtern und den Lernprozess zu verringern. Wir stellen regelmäßig aktualisierte Ressourcen für Schüler, Lehrkräfte und Institutionen bereit, um ihnen zu helfen, diese neue Technologie und die satzbezogene Erkennungsdaten zu meistern.

Schließlich haben viele unserer Mitarbeiter einen Hintergrund in der Bildung, was sicherstellt, dass unsere Produkte pädagogisch solide sind. Ohne ihre Erkenntnisse könnten wir nicht den sich ändernden Bedürfnissen von Lehrkräften und Administratoren gerecht werden. Mit all diesen Aspekten im Blick wird unsere bevorstehende “Beweis des Prozesses”-Lösung, die in bestehende Turnitin-Workflows integriert wird, sowohl Lehrkräften als auch Schülern Vertrauen in die Echtheit der Arbeit geben.

Welchen Rat würden Sie Lehrkräften und Institutionen geben, die ihre akademischen Integritätsrichtlinien angesichts der sich entwickelnden KI-Technologien verbessern möchten?

Meine Meinung zu akademischen Richtlinien ist, dass die Existenz mehrerer KI-Richtlinien auf verschiedenen institutionellen Ebenen ein Schlüssel ist, um situative Nuancen zu berücksichtigen. Beispielsweise kann eine KI-Richtlinie für eine kreative Schreibklasse nicht der beste Ansatz für die potenzielle KI-Verwendung in einer Forschungsarbeit sein. Lehrkräfte sollten Richtlinien auf der Ebene der Aufgaben erstellen, die Details über die zulässige KI-Verwendung auf der Grundlage der Lernziele der Aufgabe liefern.

Auf institutioneller Ebene sollten akademische Integritätsrichtlinien breit angelegt und auf die Art und Weise fokussiert sein, wie Schüler ihre Arbeit darstellen und ihre Quellen zitieren. Dies verhindert vorsätzliches Plagiat, während es Raum für Nuancen im Zusammenhang mit der einzigartigen Situation lässt.

Überall ist es wichtig, über einen einzelnen Erkennungsprozentsatz hinauszugehen. Unsere Tools sind dazu gedacht, Institutionen und Lehrkräften zu unterstützen, nicht sie vollständig zu ersetzen. Lehrkräfte kennen ihre Schüler am besten und sollten jede Erkennung von KI nutzen, um konstruktive Gespräche über die angemessene Verwendung von KI und kritisches Denken zu führen.

Um Lehrkräften bestmöglich zu unterstützen, verfügt Turnitin auch über eine umfangreiche Bibliothek von Ressourcen und ein umfassendes Lehrernetzwerk, um Institutionen bei der Erstellung ihrer Richtlinien zu helfen, einschließlich eines leicht zugänglichen Leitfadens, der detaillierte Einblicke in die Überprüfung und Überarbeitung bestehender akademischer Integritätsrichtlinien zur Bekämpfung von KI-Bedrohungen bietet, der online kostenlos zum Download bereitsteht.

Vielen Dank für das großartige Interview. Leser, die mehr erfahren möchten, sollten Turnitin besuchen.