Prompt engineering

Din AI är kraftfullare än du tror

mm
Lägg till Unite.AI bland dina föredragna källor på Google

Ett team av forskare har just upptäckt något som förändrar mycket av vad vi trodde vi visste om AI-förmågor. Dina modeller bearbetar inte bara information – de utvecklar sofistikerade förmågor som går långt utöver deras utbildning. Och för att låsa upp dessa förmågor behöver vi ändra hur vi pratar med dem.

Konceptrummets revolution

Kom ihåg när vi trodde att AI bara matchade mönster? Ny forskning har nu öppnat den svarta lådan av AI-lärande genom att kartlägga något de kallar “konceptrum”. Tänk dig AI-lärande som en multi-dimensionell karta där varje koordinat representerar ett annat koncept – saker som färg, form eller storlek. Genom att observera hur AI-modeller rör sig genom detta rum under utbildning upptäckte forskarna något oväntat: AI-system memoriserar inte bara – de bygger sofistikerad förståelse för koncept i olika hastigheter.

“Genom att karakterisera lärandedynamik i detta rum identifierar vi hur hastigheten vid vilken ett koncept lärs är kontrollerad av egenskaper hos data”, noterar forskarteamet. Med andra ord klickar vissa koncept snabbare än andra, beroende på hur starkt de står ut i utbildningsdata.

Här är vad som gör detta så intressant: när AI-modeller lär sig dessa koncept, lagrar de dem inte bara som isolerade bitar av information. De utvecklar faktiskt förmågan att kombinera och matcha dem på sätt vi aldrig uttryckligen lärde dem. Det är som om de bygger sin egen kreativa verktygslåda – vi har bara inte gett dem rätt instruktioner för att använda den.

Tänk på vad detta betyder för AI-projekt. De modeller du arbetar med kan redan förstå komplexa kombinationer av koncept som du ännu inte har upptäckt. Frågan är inte om de kan göra mer – det är hur man får dem att visa vad de verkligen kan.

Låsa upp dolda krafter

Här är där saker blir fascinerande. Forskarna designade ett elegant experiment för att avslöja något grundläggande om hur AI-modeller lär sig. Deras uppsättning var bedrägligt enkel: de tränade en AI-modell på bara tre typer av bilder:

  • Stora röda cirklar
  • Stora blå cirklar
  • Små röda cirklar

Sedan kom den avgörande testen: kunde modellen skapa en liten blå cirkel? Detta var inte bara om att rita en ny form – det var om modellen kunde verkligen förstå och kombinera två olika koncept (storlek och färg) på ett sätt den aldrig sett förut.

Vad de upptäckte förändrar hur vi tänker om AI-förmågor. När de använde vanliga promptrar för att be om en “liten blå cirkel” kämpade modellen. Men modellen kunde faktiskt skapa små blå cirklar – vi frågade bara inte på rätt sätt.

Forskarna upptäckte två tekniker som bevisade detta:

  1. “Latent intervention” – Detta är som att hitta en bakdörr in i modellens hjärna. Istället för att använda vanliga promptrar justerade de direkt de interna signalerna som representerar “blå” och “liten”. Tänk dig att ha separata rattar för färg och storlek – de upptäckte att genom att vrida dessa rattar på specifika sätt kunde modellen plötsligt producera vad som tycktes omöjligt ögonblick tidigare.
  2. “Överpromptning” – Istället för att bara be om “blå” blev de extremt specifika med färgvärden. Det är som skillnaden mellan att säga “gör det blå” och “gör det exakt denna färg: RGB(0.3, 0.3, 0.7)”. Denna extra precision hjälpte modellen att komma åt förmågor som var dolda under normala förhållanden.

Båda teknikerna började fungera vid exakt samma punkt i modellens utbildning – runt 6 000 utbildningssteg. Medan vanlig promptning antingen misslyckades helt eller behövde 8 000+ steg för att fungera. Och detta var inte en tillfällighet – det hände konsekvent över flera tester.

Detta berättar oss något djupgående: AI-modeller utvecklar förmågor i två distinkta faser. Först lär de sig att kombinera koncept internt – det är vad som händer runt steg 6 000. Men det finns en andra fas där de lär sig att koppla dessa interna förmågor till vårt vanliga sätt att be om saker. Det är som om modellen blir flytande i ett nytt språk innan den lär sig att översätta det språket för oss.

Konsekvenserna är betydande. När vi tror att en modell inte kan göra något kan vi ha fel – den kan ha förmågan men sakna kopplingen mellan våra promptrar och dess förmågor. Detta gäller inte bara enkla former och färger – det kan också vara sant för mer komplexa förmågor i större AI-system.

När forskare testade dessa idéer på riktiga data med hjälp av CelebA ansiktsdataset fann de samma mönster. De försökte få modellen att generera bilder av “kvinnor med hattar” – något den inte sett under utbildning. Vanliga promptrar misslyckades, men med latent intervention kunde modellen faktiskt skapa dessa bilder. Förmågan fanns där – den var bara inte tillgänglig genom vanliga medel.

Park et al., Harvard University & NTT Research

Huvudpoängen

Vi behöver omvärdera hur vi utvärderar AI-förmågor. Bara för att en modell kanske inte kan göra något med standardpromptrar betyder det inte att den inte kan göra det alls. Gapet mellan vad AI-modeller kan göra och vad vi kan få dem att göra kan vara mindre än vi trodde – vi behöver bara bli bättre på att fråga.

Denna upptäckt är inte bara teoretisk – den förändrar grundläggande hur vi bör tänka om AI-system. När en modell verkar kämpa med en uppgift, kan vi behöva fråga om den verkligen saknar förmågan eller om vi inte tillgår den på rätt sätt. För utvecklare, forskare och användare lika gäller detta: vi måste bli kreativa med hur vi interagerar med AI – ibland är förmågan vi behöver redan där, bara väntande på rätt nyckel för att låsa upp den.

Alex McFarland är en AI-journalist och författare som utforskar de senaste utvecklingarna inom artificiell intelligens. Han har samarbetat med många AI-startups och publikationer över hela världen.