AGI ja tulevaisuuden AI

AlphaEvolve: Google DeepMindin merkittävä askel kohti AGI:ä

mm
Lisää Unite.AI suosikkilähteisiisi Google-palvelussa

Google DeepMind on esittänyt AlphaEvolve:n, evolutiivisen koodausagentin, joka on suunniteltu etsimään itsenäisesti uusia algoritmeja ja tieteellisiä ratkaisuja. Esitetty tutkimuksessa, joka on nimeltään AlphaEvolve: Koodausagentti tieteelliseen ja algoritmiseen löytöön,” tämä tutkimus edustaa perustavaa askelta kohti Tekoälyä (AGI) ja jopa Yli-älyä (ASI). Sen sijaan, että riippuisi staattisesta hienosäätelystä tai ihmisen merkityistä tietokannoista, AlphaEvolve seuraa täysin eri polkua – yhdistäen autonomisen luovuuden, algoritmisen innovaation ja jatkuvaan itseparantamisen.

AlphaEvolve:n ydin on itses sisältävä evolutiivinen putki, jota ohjaa suuret kielen mallit (LLM). Tämä putki ei vain luo tulosteita – se mutatoituu, arvioi, valitsee ja parantaa koodia sukupolven jälkeen. AlphaEvolve alkaa alkuohjelmalla ja hienosäätää sitä johdonmukaisesti muuttamalla koodia.

Nämä muutokset ovat LLM:n generoimia eroja – koodin muutoksia, jotka ehdotetaan kielen mallin perusteella aiemmista esimerkeistä ja eksplisiittisistä ohjeista. “Ero” ohjelmistosuunnittelussa viittaa eroon kahden tiedoston välillä, korostaen rivit, jotka on poistettava tai korvattava ja uudet rivit, jotka on lisättävä. AlphaEvolve:ssa LLM luo nämä erot analysoimalla nykyistä ohjelmaa ja ehdottamalla pieniä muutoksia – lisäämällä funktion, optimoimalla silmukkaa tai muuttamalla hyperparametria – perustuen ohjeeseen, joka sisältää suorituskykyä ja aiemmin onnistuneita muutoksia.

Jokainen muutettu ohjelma testataan automaattisilla arvioijoilla, jotka on räätälöity tehtävään. Tehokkaimmat ehdokkaat tallennetaan, viitataan ja yhdistetään inspiraationa tuleviin sukupolviin. Ajan myötä tämä evolutiivinen silmukka johtaa yhä monimutkaisempien algoritmien kehittymiseen – usein ylittäen niitä, jotka on suunniteltu ihmisten toimesta.

AlphaEvolve:n tieteen takana

AlphaEvolve on rakennettu evolutiivisen laskennan periaatteiden pohjalta – tekoälyalgoritmin alaluokka, joka on inspiroitu biologisesta evoluutiosta. Järjestelmä alkaa perusohjelmalla, jonka se kohdeltaa alkuperäiseksi “organismiksi”. Sukupolvien aikana AlphaEvolve muuttaa tätä koodia – esittäen variaatioita tai “mutaatioita” – ja arvioi jokaisen variaation soveltuvuutta hyvin määritellyn pisteiden laskemisen avulla. Parhaiten suoriutuvat variantit säilytetään ja toimivat mallina seuraavalle sukupolvelle.

Tämä evolutiivinen silmukka on koordinoida seuraavasti:

  • Ohjeiden näytteistäminen: AlphaEvolve rakentaa ohjeita valitsemalla ja upottamalla aiemmin onnistuneita koodiesimerkkejä, suorituskykyä ja tehtäväkohtaisia ohjeita.
  • Koodin mutaatio ja ehdotus: Järjestelmä käyttää voimakkaita LLM:ä – Gemini 2.0 Flash ja Pro – generoimaan tarkkaa muutoksia nykyiseen koodipohjaan erojen muodossa.
  • Arviointimekanismi: Automaattinen arviointifunktio arvioi jokaisen ehdokkaan suorituskykyä suorittamalla sen ja palauttamalla skalaarisia pisteitä.
  • Tietokanta ja ohjaaja: Jakautunut ohjaaja orkestroi tämän silmukan, tallentaa tulokset evolutiiviseen tietokantaan ja tasapainottaa tutkimusta hyödyntämällä mekanismeja kuten MAP-Elites.

Tämä palautteen rikas, automaattinen evolutiivinen prosessi poikkeaa radikaalisti standardista hienosäätelystekniikasta. Se antaa AlphaEvolve:lle mahdollisuuden luoda uusia, korkean suorituskyvyn ja joskus vastakkaisia ratkaisuja – työntäen rajaa siitä, mitä koneoppiminen voi autonomisesti saavuttaa.

Vertailu AlphaEvolve ja RLHF

AlphaEvolve:n innovaation ymmärtämiseksi on tärkeää vertailla sitä Ihmisen palautteen vahvistusoppimiseen (RLHF), joka on hallitseva lähestymistapa suurten kielen mallien hienosäätelyyn.

RLHF:ssä ihmisten preferenssit käytetään kouluttamaan palkintomalli, joka ohjaa LLM:n oppimisprosessia vahvistusoppimisen algoritmeja kuten Proximal Policy Optimization (PPO) avulla. RLHF parantaa mallien suuntautumista ja hyödyllisyyttä, mutta se vaatii laajaa ihmisten osallistumista luodakseen palautetietoa ja toimii yleensä staattisessa, kerran hienosäätelystilassa.

AlphaEvolve sen sijaan:

  • Poistaa ihmisen palautteen silmukasta ja korvaa sen koneella suoritettavilla arvioijoilla.
  • Tukee jatkuvaan oppimiseen evolutiivisen valinnan kautta.
  • Hyödyntää laajempaa ratkaisujen tilaa satunnaisen mutaation ja epäjatkuvan suorittamisen kautta.
  • Voi luoda ratkaisuja, jotka eivät ole vain suunnattuja, vaan uusia ja tieteellisesti merkittäviä.

Kun RLHF hienosäätää käyttäytymistä, AlphaEvolve löytää ja keksii. Tämä ero on kriittinen, kun tarkastellaan tulevia polkuja kohti AGI:ä: AlphaEvolve ei vain tee parempia ennusteita – se löytää uusia polkuja totuuteen.

Sovellukset ja läpimurrot

1. Algoritmisen löytö ja matemaattinen edistys

AlphaEvolve on osoittanut kykynsä merkittäviin löytöihin perusongelmissa. Merkittävimpänä se löysi uuden algoritmin kahden 4×4 kompleksiarvoisten matriisien kertolaskuun, joka vaatii vain 48 skalaarikertolaskua – ylittäen Strassenin 1969 tuloksen 49 kertolaskusta ja rikkoen 56-vuotisen teoreettisen katon. AlphaEvolve saavutti tämän edistyneiden tensorien hajottamistekniikoiden kautta, jotka se kehitti useiden sukupolvien aikana, ylittäen useita valmiita lähestymistapoja.

Matrisioperaatioiden lisäksi AlphaEvolve teki merkittäviä panoksia matemaattiseen tutkimukseen. Se arvioitiin yli 50:ssä avoimessa ongelmassa, kuten kombinatoriikassa, lukuteoriassa ja geometriassa. Se vastasi parhaimmista tuloksista noin 75 prosentissa tapauksista ja ylitti ne noin 20 prosentissa. Nämä menestykset käsittivät parannuksia Erdősin Minimi Ylimeno -ongelmaan, tiheämmän ratkaisun Kissing Number -ongelmaan 11 ulottuvuudessa ja tehokkaampia geometrisia pakkausratkaisuja. Nämä tulokset korostavat sen kykyä toimia autonomisena matemaattisena tutkijana – hienosäätäen, iteroiden ja kehittäen yhä optimaalisempia ratkaisuja ilman ihmisen väliintuloa.

2. Optimointi Google:n laskentapinossa

AlphaEvolve on myös toimittanut konkreettisia suorituskyvyn parannuksia Google:n infrastruktuurissa:

  • Tietokeskuksen aikataulutuksessa se löysi uuden heuristiikan, joka paransi työn sijoittelua ja palautti 0,7 prosenttia aiemmin jumiin jääneistä laskentaresursseista.
  • Gemini:n koulutusytimissä AlphaEvolve kehitti paremman tiilien jakostrategian matriisien kertolaskuun, saavuttaen 23 prosentin nopeutuksen ytimen koulutuksessa ja 1 prosentin kokonaisen vähennyksen koulutusajassa.
  • TPU-piirien suunnittelussa se tunnisti yksinkertaisen logiikan aritmeettiseen loogiseen RTL:ään (Rekisterisiirto), jota insinöörit vahvistivat ja sisällyttivät seuraaviin TPU-piireihin.
  • Se optimoi myös kääntäjän FlashAttention-koodin muokkaamalla XLA-välimuotoja, leikkaamalla inference-ajan GPU:illa 32 prosentilla.

Nämä tulokset yhdessä vahvistavat AlphaEvolve:n kyvyn toimia useilla abstraktiotasoilla – symbolisesta matematiikasta matalan tason laitteistoon – ja toimittaa todellisia suorituskyvyn parannuksia.

  • Evolutiivinen ohjelmointi: Tekoälyparadigma, joka käyttää mutaatiota, valintaa ja periytymistä ratkaisujen hienosäätämiseen.
  • Koodin superoptimoiminen: Automaattinen etsintä funktion tehokkaimmasta toteutuksesta – usein johtaa yllättäviin, vastakkaisiin parannuksiin.
  • Metaohjeiden evoluutio: AlphaEvolve ei vain kehita koodia – se kehittää myös, miten se viestii ohjeita LLM:lle – mahdollistaen itsehienosäätelyn koodausprosessissa.
  • Discrétisation-häviö: Säännöstermi, joka kannustaa tulosteita vastaamaan puolilukua tai kokonaislukuja, kriittinen matemaattiselle ja symboliselle selkeydelle.
  • Harhautus-häviö: Mekanismi, joka ruokkii satunnaisuutta välimuotoisiin ratkaisuihin, kannustaen tutkimusta ja välttäen paikallisia minimejä.
  • MAP-Elites-algoritmi: Laatu- ja monimuotoisuusalgoritmi, joka ylläpitää monipuolista korkean suorituskyvyn ratkaisujen joukkoa ominaisuusulottuvuuksissa – mahdollistaen kestävän innovaation.

Implikaatiot AGI:lle ja ASI:lle

AlphaEvolve on enemmän kuin optimoija – se on vihje tulevaan, jossa älykäs agentti voi osoittaa luovan autonomian. Järjestelmän kyky muodostaa abstrakteja ongelmia ja suunnitella omia lähestymistapoja niiden ratkaisemiseen edustaa merkittävää askelta kohti Tekoälyä. Tämä menee datan ennustamisen ohi – se sisältää rakenteellisen päättelyn, strategian muodostamisen ja mukautumisen palautteeseen – älykkään käyttäytymisen piirteitä.

Sen kyky iteratiivisesti generoida ja hienosäätää hypoteeseja myös merkitsee älymän oppimisen evoluution. Toisin kuin mallit, jotka vaativat laajaa valvottua koulutusta, AlphaEvolve parantaa itseään silmukassa kokeilun ja arvioinnin kautta. Tämä dynaaminen älymuoto antaa sille mahdollisuuden navigoida monimutkaisissa ongelmatiloissa, hylätä heikot ratkaisut ja korottaa vahvempia ilman suoraa ihmisen valvontaa.

Suorittamalla ja vahvistamalla omia ideoitaan, AlphaEvolve toimii sekä teoreetikkona että kokeilijana. Se siirtyy ennalta määritellyistä tehtävistä löytöalueelle – simuloimalla autonomisen tieteellisen prosessin. Jokainen ehdotettu parannus testataan, benchmarkataan ja uudelleen integroidaan – sallien jatkuvaan hienosäätöön perustuvan todellisten tulosten sijaan staattisiin tavoitteisiin.

Ehkä merkittävimpänä AlphaEvolve on varhainen esimerkki rekursiivisesta itseparantamisesta – jossa tekoälyjärjestelmä ei vain opi, vaan parantaa myös osia itsestään. Useissa tapauksissa AlphaEvolve paransi koulutusinfrastruktuuria, joka tukee sen perusmalleja. Vaikka se on edelleen rajoitettu nykyisillä arkkitehtuureilla, tämä kyky asettaa esimerkin. Kun enemmän ongelmia on muotoiltu arvioitavissa oleviin ympäristöihin, AlphaEvolve voisi skaalata yhä monimutkaisempaan ja itseoptimointikykyiseen käyttäytymiseen – perustava piirre Yli-älyssä (ASI).

Rajoitukset ja tuleva polku

AlphaEvolve:n nykyinen rajoitus on sen riippuvuus automaattisista arviointifunktioista. Tämä rajoittaa sen hyödyllisyyttä ongelmiin, jotka voidaan muotoilla matemaattisesti tai algoritmillisesti. Se ei voi toimia merkittävästi alueilla, jotka vaativat implisiittistä ihmisen ymmärrystä, subjektiivista arviointia tai fyysistä kokeilua.

Tulevaisuuden suunnat kuitenkin sisältävät:

  • Hybridisen arvioinnin integrointi: yhdistämällä symbolista päättelyä ihmisen preferensseihin ja luonnollisen kielen arvosteluihin.
  • Toimintaa simulaatioympäristöissä, mahdollistaen ruumiillistetun tieteellisen kokeilun.
  • Evolveiden tulosteiden tislaaminen perus-LLM:ihin, luomalla tehokkaampia ja näyte-tehokkaampia perusmalleja.

Nämä suunnat osoittavat yhä enemmän agenteja, jotka ovat autonomisesti ratkaisevia ongelmia.

Johtopäätös

AlphaEvolve on merkittävä askel – ei vain tekoälytyökaluissa, vaan myös meidän ymmärryksessä koneälystä itsestään. Yhdistämällä evolutiivisen haun LLM:n päättelyyn ja palautteeseen, se määrittelee uudelleen, mitä koneet voivat itsenäisesti löytää. Se on varhainen, mutta merkittävä signaali, että itseparantavat järjestelmät, jotka ovat kykeneviä todelliseen tieteelliseen ajatteluun, eivät ole enää teoreettisia.

Katsomalla eteenpäin, arkkitehtuuri, joka on AlphaEvolve:n perustana, voidaan soveltaa itselleen: evoluutio arvioijille, parantaminen mutaatiologiikkaa, hienosäätö pisteiden laskentafunktioita ja optimointi perustuvia koulutusputkia, joista se riippuu. Tämä rekursiivinen optimointisilmukka edustaa teknistä mekanismia AGI:n käynnistämiseksi, jossa järjestelmä ei vain suorita tehtäviä – se parantaa itse infrastruktuuria, joka mahdollistaa sen oppimisen ja päättelyn.

Ajan myötä, kun AlphaEvolve laajenee monimutkaisempiin ja abstraktimpiin alueisiin – ja kun ihmisen osallistuminen prosessiin vähenee – se voi osoittaa kiihtyvän älymän edut. Tämä itse vahvistava silmukka itseparantamisesta, sovellettuna ei vain ulkoisiin ongelmiin, vaan myös sisäisesti omiin algoritmisiin rakenteisiin, on avainkomponentti AGI:n teoreettisessa viitekehyksessä ja kaikissa sen hyödyissä, joita se voi tarjota yhteiskunnalle. Sen yhdistelmä luovuudesta, autonomiasta ja rekursiosta tekee AlphaEvolve:sta mahdollisen esikuvan ensimmäisille todella yleisille ja itsekehittyville tekoälymielessä.

Antoine on visionäärisellä johtajalla ja Unite.AI:n perustajakumppani, joka on intohimoisesti omistautunut tulevaisuuden älyteknologian ja robotiikan muotoiluun ja edistämiseen. Sarjayrittäjänä hän uskoo, että älyteknologia tulee olemaan yhtä mullistava yhteiskunnalle kuin sähkö, ja hän on usein innostunut puhumaan älyteknologian ja AGI:n mahdollisuuksista.

Hän on tulevaisuudentutkija, joka on omistautunut tutkimiseen, miten nämä innovaatiot muotoilevat maailmaamme. Lisäksi hän on Securities.io:n perustaja, joka on keskittynyt sijoittamiseen älykkäisiin teknologioihin, jotka määrittelevät tulevaisuutta ja muokkaavat koko toimialoja.