AI-modeller och plattformar

GPT-2, konstgjord intelligens textgenerator slÃĪpps i sin helhet

mm
Publicerad
Uppdaterad
LÃĪgg till Unite.AI bland dina fÃķredragna kÃĪllor pÃĨ Google

Som TheNextWeb (TNW) rapporterar, OpenAI, den icke-vinstdrivande organisationen bakom ett antal konstgjorda intelligensprojekt, har just publicerat den slutliga modellen i den planerade etappvis utgÃĨvan av GPT-2, en textgenerator som har orsakat en hel del debatt sedan dess tillkÃĪnnagivna utgivning i februari.

Baserat pÃĨ OpenAI:s forskningsartikel med titeln Language Models are Unsupervised Multitask Learners, ”GPT-2 anvÃĪnder maskinlÃĪrning fÃķr att generera ny text baserat pÃĨ begrÃĪnsad inmatning.” Det betyder att en anvÃĪndare kan skriva in en mening eller tvÃĨ om nÃĨgot ÃĪmne och AI-generatoren kommer att skapa en text som har nÃĨgon relation till den ursprungliga inmatningen. I sjÃĪlva verket, som TNW noterar, till skillnad frÃĨn de flesta ”textgenereratorer” producerar den inte fÃķrskrivna strÃĪngar. GPT-2 skapar text som tidigare inte funnits.”

I sin tweet ger Scott B. Weingart, programdirektÃķr fÃķr Carnegie Mellon University Libraries, ett konkret exempel:

 

OpenAI var initialt orolig fÃķr mÃķjliga skadliga anvÃĪndningar av sitt system, sÃĨ i februari 2019 beslutade de att slÃĪppa GPT-2 i fyra delar under ÃĨtta mÃĨnader. Som de fÃķrklarade i sin blogg, ” “PÃĨ grund av vÃĨra farhÃĨgor om skadliga tillÃĪmpningar av tekniken, slÃĪpper vi inte den trÃĪnade modellen. Som ett experiment i ansvarsfull avslÃķjande, slÃĪpper vi istÃĪllet en mycket mindre modell fÃķr forskare att experimentera med, samt en teknisk rapport.”

Som fÃķrklarats, innehÃĨller den fullstÃĪndiga modellen 1,5 miljarder parametrar. ”Ju fler parametrar en modell trÃĪnas med, desto ”smartare” verkar den – precis som mÃĪnniskor, Ãķvning ger fÃĪrdighet.”

TNW noterar att initialt slÃĪppte OpenAI en modell med 124 miljoner parametrar, fÃķljt av utgÃĨvor med 355 och 774 miljoner. Enligt dem visade varje iteration en betydande fÃķrbÃĪttring av fÃķrmÃĨga jÃĪmfÃķrt med tidigare iterationer.

FÃķr att fÃķrhindra missbruk slÃĪppte OpenAI GPT-2-identifieringsmodeller som ÃĪr tÃĪnkta att ”fÃķrebyggande bekÃĪmpa missbruk.” I enlighet med deras eget medgivande i en blogginlÃĪgg, behÃķver dessa identifieringsmodeller fortfarande ytterligare arbete fÃķr att nÃĨ den kvalitetsnivÃĨ som hittills uppnÃĨtts i GPT-2 sjÃĪlv.

De som ÃĪr intresserade kan ladda ner GPT-2-modellen hÃĪr pÃĨ Github, kolla in modellkortet hÃĪr, och lÃĪsa OpenAI:s blogginlÃĪgg hÃĪr.

mm

FÃķre detta diplomat och ÃķversÃĪttare fÃķr UN, fÃķr nÃĪrvarande frilansjournalist/fÃķrfattare/forskare, med fokus pÃĨ modern teknik, artificiell intelligens och modern kultur.