Prompt engineering

Uw AI is krachtiger dan u denkt

mm
Voeg Unite.AI toe aan je voorkeursbronnen op Google

Een team van wetenschappers heeft iets ontdekt dat veel van wat we dachten te weten over AI-mogelijkheden verandert. Uw modellen verwerken niet alleen informatie – ze ontwikkelen geavanceerde capaciteiten die verder gaan dan hun training. En om deze capaciteiten te ontgrendelen, moeten we onze manier van communiceren met hen veranderen.

De Concept Space Revolutie

Herinnert u zich nog toen we dachten dat AI alleen patronen herkende? Nieuw onderzoek heeft nu de black box van AI-leerprocessen geopend door iets te karteren dat ze “concept space” noemen. Stelt u zich voor dat AI-leerprocessen een multidimensionale kaart zijn waar elke coördinaat een ander concept vertegenwoordigt – dingen zoals kleur, vorm of grootte. Door te kijken hoe AI-modellen door deze ruimte bewegen tijdens de training, ontdekten onderzoekers iets onverwachts: AI-systemen onthouden niet alleen – ze bouwen geavanceerde begrip van concepten op verschillende snelheden.

“Door de leer dynamiek in deze ruimte te karakteriseren, identificeren we hoe de snelheid waarmee een concept wordt geleerd wordt beheerst door eigenschappen van de data,” merkt het onderzoeksteam op. Met andere woorden, sommige concepten klikken sneller dan andere, afhankelijk van hoe sterk ze in de trainingsdata uitkomen.

Hier is wat dit zo interessant maakt: wanneer AI-modellen deze concepten leren, slaan ze ze niet alleen op als geïsoleerde stukjes informatie. Ze ontwikkelen daadwerkelijk de capaciteit om ze op manieren te combineren die we nooit expliciet hebben onderwezen. Het is alsof ze hun eigen creatieve gereedschapskist bouwen – we hebben ze alleen nog niet de juiste instructies gegeven om het te gebruiken.

Denk aan wat dit betekent voor AI-projecten. De modellen waarmee u werkt, kunnen al complexe combinaties van concepten begrijpen die u nog niet heeft ontdekt. De vraag is niet of ze meer kunnen doen – het is hoe we ze kunnen laten zien wat ze echt kunnen.

Het Ontgrendelen van Verborgen Krachten

Hier wordt het fascinerend. De onderzoekers ontwierpen een elegante test om iets fundamenteels over het leerproces van AI-modellen te onthullen. Hun opzet was verrassend eenvoudig: ze trainden een AI-model op slechts drie soorten afbeeldingen:

  • Grote rode cirkels
  • Grote blauwe cirkels
  • Kleine rode cirkels

Toen kwam de cruciale test: kon het model een kleine blauwe cirkel maken? Dit was niet alleen over het tekenen van een nieuwe vorm – het was over of het model echt kon begrijpen en combineren van twee verschillende concepten (grootte en kleur) op een manier die het nooit eerder had gezien.

Wat ze ontdekten, verandert hoe we over AI-mogelijkheden denken. Toen ze normale prompts gebruikten om te vragen om een “kleine blauwe cirkel”, worstelde het model. Echter, het model kon wel kleine blauwe cirkels maken – we vroegen alleen niet op de juiste manier.

De onderzoekers ontdekten twee technieken die dit bewezen:

  1. “Latente interventie” – Dit is als het vinden van een achterdeur naar de hersenen van het model. In plaats van normale prompts te gebruiken, pasten ze de interne signalen aan die “blauw” en “klein” vertegenwoordigen. Stelt u zich voor dat u aparte knoppen voor kleur en grootte heeft – ze ontdekten dat door deze knoppen op specifieke manieren te draaien, het model plotseling kon produceren wat onmogelijk leek momenten eerder.
  2. “Overprompting” – In plaats van alleen te vragen om “blauw”, werden ze extreem specifiek over kleurwaarden. Het is als het verschil tussen “maak het blauw” en “maak het exact deze kleur: RGB(0.3, 0.3, 0.7)”. Deze extra precisie hielp het model toegang te krijgen tot capaciteiten die onder normale omstandigheden verborgen waren.

Beide technieken begonnen te werken op hetzelfde punt in de training van het model – rond 6.000 trainingsstappen. Ondertussen faalde normale prompting volledig of had 8.000+ stappen nodig om te werken. En dit was geen toeval – het gebeurde consistent over meerdere tests.

Dit vertelt ons iets diepgaands: AI-modellen ontwikkelen capaciteiten in twee distincte fasen. Eerst leren ze daadwerkelijk hoe ze concepten intern kunnen combineren – dat gebeurt rond stap 6.000. Maar er is een tweede fase waarin ze leren hoe ze deze interne capaciteiten kunnen verbinden met onze normale manier van vragen. Het is alsof het model eerst een nieuwe taal leert voordat het leert om die taal voor ons te vertalen.

De implicaties zijn aanzienlijk. Wanneer we denken dat een model iets niet kan doen, kunnen we het mis hebben – het kan de capaciteit hebben, maar ontbreekt het aan de verbinding tussen onze prompts en zijn capaciteiten. Dit geldt niet alleen voor eenvoudige vormen en kleuren – het kan ook waar zijn voor complexere capaciteiten in grotere AI-systemen.

Toen onderzoekers deze ideeën testten op echte gegevens met de CelebA face dataset, vonden ze hetzelfde patroon. Ze probeerden het model afbeeldingen te laten maken van “vrouwen met hoeden” – iets wat het nooit in de training had gezien. Normale prompts faalden, maar met latente interventie bleek het model deze afbeeldingen wel te kunnen maken. De capaciteit was er – het was alleen niet toegankelijk via normale middelen.

Park et al., Harvard University & NTT Research

De Belangrijkste Conclusie

We moeten onze manier van denken over AI-mogelijkheden heroverwegen. Alleen omdat een model iets niet kan doen met standaardprompts, betekent dit niet dat het het niet kan doen. De kloof tussen wat AI-modellen kunnen doen en wat we ze kunnen laten doen, kan kleiner zijn dan we dachten – we moeten alleen beter worden in het vragen.

Deze ontdekking is niet alleen theoretisch – het verandert fundamenteel hoe we over AI-systemen moeten denken. Wanneer een model lijkt te worstelen met een taak, moeten we ons afvragen of het echt ontbreekt aan de capaciteit of dat we het alleen niet op de juiste manier benaderen. Voor ontwikkelaars, onderzoekers en gebruikers betekent dit dat we creatiever moeten worden in onze interactie met AI – soms is de capaciteit die we nodig hebben al aanwezig, alleen wachten op de juiste sleutel om het te ontgrendelen.

Alex McFarland is een AI-journalist en schrijver die de laatste ontwikkelingen op het gebied van kunstmatige intelligentie onderzoekt. Hij heeft samengewerkt met talloze AI-startups en publicaties wereldwijd.