OpenAI brengt commerciële versie van beroemde tekstgeneratiemodel uit

Het onderzoekscentrum voor kunstmatige intelligentie OpenAI zal zijn beroemde tekstgeneratietool GPT-3 beschikbaar stellen voor aankoop, waarmee het de eerste commerciële productie van de machine learning non-profit wordt.

In februari van het voorgaande jaar maakte OpenAI zijn tekstgeneratiemodel GPT-2 open source. GPT-2 kon indrukwekkend coherente tekst genereren wanneer het een korte prompt kreeg, en het model werd beschouwd als een belangrijke stap voorwaarts in de gebieden van natuurlijke taalverwerking en kunstmatige intelligentie. In feite weigerde OpenAI aanvankelijk om het GPT-2-model uit te brengen, omdat het te gevaarlijk was voor een open-source-uitgave, uit angst voor misbruik. Echter, nadat een versie van het model enige tijd beschikbaar was en de non-profit geen bewijs van kwaadwillig gebruik had gezien, werd besloten om het model open source te maken. Onlangs kondigde OpenAI de opvolger van GPT-2 aan, genaamd GPT-3.

Het GPT-3-model is ongeveer 100 keer groter dan zijn voorganger, en het is dit model dat ze als commercieel product aanbieden. Het GPT-2-model bestond uit ongeveer 1,5 miljard parameters, terwijl GPT-3 ongeveer 175 miljard parameters heeft. De geavanceerdheid en betrouwbaarheid van de GPT-modellen hebben ervoor gezorgd dat ze de standaard zijn geworden voor machine learning-projecten met betrekking tot tekst. Net zoals convolutionele neurale netwerken de standaard zijn geworden voor projecten met betrekking tot afbeeldingen, worden tekstgerelateerde projecten steeds vaker uitgevoerd met GPT-2, en mogelijk binnenkort met GPT-3.

Volgens The Verge lijkt het erop dat OpenAI probeert de adoptie van een GPT-standaard te stimuleren door hun GPT-3-model commercieel beschikbaar te stellen. Op dit moment is toegang tot de GPT-3 API alleen mogelijk na uitnodiging. Echter, dit is waarschijnlijk slechts een testrun en het lijkt waarschijnlijk dat GPT-3 binnenkort breder beschikbaar zal worden gesteld. OpenAI heeft aangegeven dat ze klanten van hun modellen zullen screenen om misbruik van de technologie voor onethische doeleinden, zoals spammen, het creëren van misinformatie of het plegen van intimidatie, te voorkomen.

Het is enigszins onduidelijk hoe GPT-3 precies door klanten zal worden gebruikt. Dit kan worden toegeschreven aan het feit dat GPT-3 zo flexibel is en zo veel potentieel heeft. GPT-gebaseerde modellen kunnen worden aangepast om tekst te genereren die geschikt is voor specifieke taken. Het model kan zich aanpassen aan een breed scala aan prompts en invoerstijlen, wat betekent dat het kan worden gebruikt om tekstsamenvattingstools te creëren, eenvoudige vragen te beantwoorden of als basis voor een geavanceerde chatbot. Zoals OpenAI’s chief technology officer Greg Brockman aan Wired uitlegde:

“De grote mentale verschuiving is dat het veel meer is als praten met een mens dan het opmaken van dingen voor een machine,” zegt Greg Brockman, OpenAI’s chief technology officer. “Je geeft het een paar vragen en antwoorden en plotseling is het in Q&A-modus.”

Het is onbekend hoe betrouwbaar de commerciële modellen die zijn afgeleid van GPT-3 zullen zijn. Hoewel GPT-3 syntactisch correcte, natuurlijk klinkende taal kan genereren, ontbreekt het aan een intuïtief begrip van de echte wereld en hoe concepten met elkaar in verband staan. Dit kan problematisch blijken voor toepassingen waarbij het behoud van context erg belangrijk is, zoals chatbots die zijn ontworpen voor klantenservice.

Joe Davison, een onderzoeksingenieur bij Hugging Face, zei tegen Digital Trends dat de enorme omvang van GPT-3 zijn potentieel gebruik kan beperken. Davison betoogde dat hoewel OpenAI de staat van de techniek aanzienlijk heeft verbeterd met betrekking tot tekstgeneratie, en heeft aangetoond dat het creëren van algemene modellen de behoefte aan taakspecifieke gegevens kan verminderen, de berekeningsbronnen die nodig zijn om GPT-3 te gebruiken het voor veel bedrijven vrijwel onpraktisch maken.

OpenAI was eerder een non-profitonderneming, maar sinds 2019 is het laboratorium overgeschakeld naar een winstmodel. GPT-3 is het eerste grote commerciële product dat door het laboratorium is geproduceerd, en het moet nog worden gezien of de overstap naar een winstmodel de onderzoeksdoelstellingen van OpenAI zal veranderen.