AI-modellen en platforms

GPT-2, Kunstmatige Intelligentie Tekst-Generator Wordt Volledig Vrijgegeven

mm
Gepubliceerd op
Bijgewerkt op
Voeg Unite.AI toe aan je voorkeursbronnen op Google

Zoals TheNextWeb (TNW) meldt, heeft OpenAI, de non-profitorganisatie achter verschillende kunstmatige intelligentieprojecten, zojuist het definitieve model gepubliceerd in de geplande gefaseerde release voor GPT-2, een tekstgenerator die sinds de aankondiging van de release in februari heel wat debat heeft veroorzaakt.

Op basis van het onderzoeksrapport van OpenAI met de titel Language Models are Unsupervised Multitask Learners, gebruikt GPT-2 machine learning om op basis van beperkte invoer nieuwe tekst te genereren.” Dat betekent dat een gebruiker een zin of twee over elk onderwerp kan invoeren en de AI-generator komt met een tekst die enige relatie heeft met de oorspronkelijke invoer. In wezen, zoals TNW opmerkt, in tegenstelling tot de meeste ‘tekstgeneratoren’ produceert het geen vooraf geschreven strings. GPT-2 maakt tekst die eerder niet bestond.”

In een tweet geeft Scott B. Weingart, programmadirecteur van Carnegie Mellon University Libraries, een concreet voorbeeld:

 

OpenAI was aanvankelijk bezorgd over mogelijke kwaadwillige toepassingen van hun systeem, dus besloot het in februari 2019 om GPT-2 in vier delen over acht maanden vrij te geven. Zoals ze in hun blog uitlegden, “Vanwege onze zorgen over kwaadwillige toepassingen van de technologie, geven we het getrainde model niet vrij. Als experiment in verantwoorde openbaarmaking, geven we in plaats daarvan een veel kleiner model vrij voor onderzoekers om mee te experimenteren, evenals een technisch rapport.”

Zoals uitgelegd, bevat het volledige model 1,5 miljard parameters. “Hoe meer parameters een model is getraind, hoe ‘slimmer’ het lijkt te zijn – net als bij mensen, oefening baart kunst.”

TNW meldt dat OpenAI aanvankelijk een model met 124 miljoen parameters vrijgaf, gevolgd door releases met 355 en 774 miljoen. Volgens hen toonde elke iteratie een aanzienlijke verbetering in mogelijkheden ten opzichte van eerdere iteraties.

Om misbruik te voorkomen, heeft OpenAI GPT-2-detectiemodellen vrijgegeven die “kwaadwillig gebruik moeten voorkomen.” Volgens hun eigen erkenning in een blogbericht hebben deze detectiemodellen nog extra werk nodig om het kwaliteitsniveau te bereiken dat tot nu toe in GPT-2 zelf is bereikt.

Geïnteresseerden kunnen het GPT-2-model hier op Github downloaden, het modelkaart hier bekijken en het blogbericht van OpenAI hier lezen.

mm

Voormalig diplomaat en vertaler voor de UN, momenteel freelance journalist/schrijver/onderzoeker, met focus op moderne technologie, kunstmatige intelligentie en moderne cultuur.