OpenAI:n kielen generointitekniikka GPT-3 herättää paljon huomiota

Voittoa tavoittelematon tekoälytutkimusyhtiö OpenAI, jota tukevat nimet kuten Peter Thiel, Elon Musk, Reid Hoffman, Marc Benioff ja Sam Altman, on julkaissut GPT-3:n, yhtiön kolmannen sukupolven kielen ennustemallin. GPT-3:n julkaisu on saanut osakseen äärimmäistä huomiota joistakin varhaisista käyttäjistä.

Mikä on GPT-3

GPT-3 on kaikkien aikojen suurin kielimalli ja pystyy tuottamaan tekstiä, joka on useissa tapauksissa erottamaton ihmisten kirjoittamasta tekstistä. OpenAI kuvaili kielen ennustusteknologiaa ensimmäisen kerran tutkimuspaperissaan toukokuussa. Viime viikolla joitakin ihmisiä annettiin varhainen pääsy ohjelmistoon yksityisen beetan kautta.

OpenAI luottaa ulkopuolisiin kehittäjiin oppiakseen lisää tekniikasta ja siitä, mihin se pystyy, ja yhtiöllä on suunnitelma tulla kaupalliseksi vuoden loppuun mennessä. Yritykset voivat maksaa tilauksen käyttääksesi tekoälyä.

Voimakkain kielimalli

GPT-3 on osoittautunut voimakkaimmaksi kielimalliksi, joka on koskaan luotu. Edeltävästä GPT-2-mallista kehittyneenä GPT-3 julkaistiin viime vuonna. GPT-2 oli myös erittäin vaikuttava, pystyen luomaan päteviä tekstirivejä avauslauseen jälkeen.

GPT-3:lla on 175 miljardia parametreja, jotka kasvoivat GPT-2:n 1,5 miljardista, ja tekoäly on osoittanut pystyvänsä luomaan novelleja, lauluja, lehdistötiedotteita ja teknisiä käsikirjoja. Teknologia ei voi vain luoda tarinoita, vaan se voi tehdä niin käyttäen kieltä, joka on suhteellista tiettyihin kirjailijoihin. Teknologia vaati vain otsikon, kirjailijan nimen ja alkusanat. GPT-3 pystyy myös luomaan muita tekstejä, kuten kitaratabulaatteja ja tietokonekoodia.

Web-kehittäjä Sharif Shameem pystyi käyttämään GPT-3:ta luomaan verkkosivujen ulkoasuja, kun taas kuuluisa koodari John Carmach, Oculus VR:n CTO ja tietokonegrafiikan merkittävä vaikuttaja, sanoi uudesta teknologiasta: “GPT-3:n kyky luoda koodia aiheuttaa hieman väristymistä.”

Ongelmia ja älykkyyden suhteen

On edelleen joitakin ongelmia GPT-3:n ja sen tuottaman kielen tasolla, joka voi olla sisällön tai seksististä ja rasistista kieltä. Tämäntyyppinen ongelma oli ratkaistu GPT-2-mallissa, joten se ei ole uusi ongelma.

GPT-3 ei ole älykäs ja tekee paljon virheitä, joita ihminen ei tee, mutta insinööritöissä on erinomaista. Teknologia on erittäin hyvä syntetisoimaan tekstiä internetissä ja poimimaan miljoonia tekstinpätkiä, joita se voi yhdistää.

Tämän vuoksi ihmiset kuten Sam Altman, OpenAI:n perustaja Elon Muskin kanssa, olivat nopeita vähentämään osaa huomiosta, jota teknologia sai.

“GPT-3-huomio on liian paljon. Se on vaikuttava (kiitos kauniista kommenteista!), mutta sillä on edelleen vakavia heikkouksia ja se tekee joskus erittäin typerästi virheitä. Tekoäly muuttaa maailmaa, mutta GPT-3 on vain varhainen vilkaisu. Meillä on vielä paljon selvitettävää”, hän twiittasi 19. heinäkuuta.

OpenAI on vasta alussa, mutta GPT-3 on valtava askel eteenpäin tekoälyssä ja kielten ennustusteknologiassa.