AI-modeller og plattformer

Hvorfor Agentic AI Fremdeles Feiler i Den Virkelige Verden

mm
Legg til Unite.AI blant dine foretrukne kilder på Google

I løpet av de siste årene har vi sett agentic AI-systemer generere imponerende demonstrasjoner. De skriver kode som passerer testtilfeller. De søker på nettet og besvarer komplekse spørsmål. De navigerer i programgrensesnitt med merkelig nøyaktighet. Hver konferansepresentasjon, hver pressemelding, hver benchmark-rapport fremhever fremveksten av agentic AI.

Men det er et problem som skjuler seg under disse imponerende demonstrasjonene. Når disse samme systemene flyttes fra kontrollerte miljøer til virkelig verdensutplassering, feiler de ofte i måter som benchmark aldri har forutsagt. Kodegeneratoren som fungerte perfekt på 100 kurerte eksempler begynner å produsere feil på randtilfeller den aldri har sett. Søkeagenten som oppnådde 85% nøyaktighet i laboratoriet henter stadig mer irrelevante resultater ettersom brukeratferd endrer seg. Planleggingssystemet som koordinerte ti API-forespørsler feilfritt under testing bryter når det møter et uventet API-svarformat.

Disse systemene feiler ikke fordi de mangler intelligens, men fordi de mangler tilpasning. Problemet ligger i hvordan AI-agenter lærer og justerer. Mens banebrytende systemer er bygget på massive grunnmodeller, er rå intelligens alene ikke nok. For å utføre spesialiserte oppgaver, må en agent kunne tilpasse seg. Dagens agentic AI-systemer kan ikke gjøre dette på grunn av strukturelle begrensninger i deres design og trening. I denne artikkelen utforsker vi disse begrensningene og hvorfor de varer.

Illusjonen av Evne i Demonstrationsversjoner

Den farligste feilmodusen i moderne AI er illusjonen av kompetanse. Korte demonstrasjoner skjuler ofte den virkelige kompleksiteten. De opererer på rene datasett, forutsigbare API-er og smale oppgaveområder. Produksjonsmiljøer er det motsatte. Databaser er ufullstendige, skjemaer endrer seg uten varsel, tjenester utløper, tilgangskonflikter oppstår, og brukerne stiller spørsmål som krenker systemets underliggende antakelser.

Dette er der produksjonskompleksiteten øker betydelig. En enkelt randtilfelle som oppstår en gang i en demo kan oppstå tusenvis av ganger per dag i utplassering. Små probabilistiske feil akkumulerer. En agent som er “nærmest riktig” blir raskt urimelig i virkelig drift.

I kjernen av problemet ligger avhengigheten av frosne grunnmodeller. Disse modellene utmerker seg på mønsterfullføring, men agent-atferd er sekvensiell og tilstandsbasert. Hver handling avhenger av utfallet av den foregående. I slike settinger akkumulerer statistisk usikkerhet raskt. En liten feil tidlig i en oppgave kan kaskade til løkker, døde ender eller destruktive handlinger senere. Dette er hvorfor agenter som ser kompetente ut under evaluering ofte forverres raskt når de utplasseres.

Problemet er ikke et manglende trekk. Det er at generelle modeller blir bedt om å oppføre seg som domenespesialister uten å bli tillatt å lære fra deres miljø.

Fra Generell Intelligens til Situert Kompetanse

Grunnmodeller er generalister ved design. De koderer bred kunnskap og fleksible resonemønstre. Produksjonsagenter, derimot, må være situasjonelle. De må forstå de spesifikke reglene, begrensningene og feilmodusene til en bestemt organisasjon og dens verktøy. Uten dette, ligner de på noen som har lest alle manualer, men aldri har arbeidet en dag på jobben.

Å broforbinde dette gapet krever en omtenkning av tilpasning selv. Dagens metoder faller inn i to brede, feilaktige leirer: å gjenopprette den grunnleggende AI-agenten selv, eller å finjustere de eksterne verktøyene den bruker. Hver tilnærming løser ett problem mens den skaper andre. Dette etterlater oss med systemer som er enten for stive, for dyre eller for ustabile for produksjonsmiljøer der konsistens og kostnad teller.

Den Monolittiske Agent-fellen

Den første tilnærmingen, Agent-tilpasning, prøver å gjøre den grunnleggende LLM smartere i å bruke verktøy. Det lærer essensielt AI de spesifikke ferdighetene den trenger for å bruke verktøyene. Forskere kategoriserer dette videre i to klasser. Noen metoder trener agenten ved hjelp av direkte tilbakemelding fra verktøy, som en kodekompilators suksess eller en søkemotors resultater. Andre trener den basert på den endelige utgangens riktighet, som et riktig eller galt svar.

Systemer som DeepSeek-R1 og Search-R1 viser at agenter kan lære komplekse, flertrinnsstrategier for verktøybruk. Imidlertid kommer denne kraften med en betydelig kostnad. Å trene billion-parametermodeller er komputasjonelt ekstravagant. Mer kritisk, skaper det en stiv, skjør intelligens. Ved å kombinere agentens kunnskap og verktøyregler, gjør denne tilnærmingen oppdateringer langsomme, risikable og uegnet for raskt skiftende forretningsbehov. Å tilpasse agenten til en ny oppgave eller verktøy risikerer “katastrofalt glemsel“, hvor den mister tidligere mestrede ferdigheter. Det er som å måtte bygge om en hel fabrikkproduksjonslinje hver gang du ønsker å legge til et nytt produkt.

Den Ømfintlige Verktøy-Problem

Ved å erkjenne disse begrensningene, er den andre store tilnærmingen, Verktøy-tilpasning, å la den grunnleggende agenten være frosset og i stedet optimalisere verktøyene i dens økosystem. Dette er mer modulært og kostnadseffektivt. Noen verktøy er trent generisk, som en standard søkefunksjon, og koblet inn. Andre er spesifikt avstemt for å komplementere en frosset agent, og lærer fra dens utgang for å bli bedre hjelpere.

Dette paradigmet har enorme løfter for effisiens. En banebrytende studie av et system kalt s3 demonstrerte potensialet for denne tilnærmingen. Det trente et lite, spesialisert “søker”-verktøy for å støtte en frosset LLM, og oppnådde en ytelse som var sammenlignbar med en fullstendig gjenopprettet agent som Search-R1, men brukte 70 ganger færre treningdata. Intuisjonen er at hvorfor må en genial fysiker lære å bruke en bibliotekskatalog? I stedet, trener du en bedre bibliotekar som forstår fysikerens behov.

Imidlertid har verktøymodellen sin egen begrensning. Evnene til hele systemet er ultimate begrenset av den frosne LLMs innebygde resonnering. Du kan gi en skarpere skalpel til en kirurg, men du kan ikke gjøre en ikke-kirurg til å utføre hjerteoperasjoner. Videre, å koordinere en voksende samling av adaptive verktøy blir en kompleks integrasjonsutfordring. Verktøy A kan optimalisere for en måling som krenker Verktøy Bs inndatakrav. Systemets ytelse avhenger da av en ømfintlig balanse mellom sammenkoblede komponenter.

Tilpasningsutfordringen

Dette bringer oss til kjernen av tilpasningsdefisitten i dagens agentic AI-paradigmer. Vi kan enten tilpasse agenten eller verktøyene, men ikke begge på en synkron og stabil måte. Produksjonsmiljøer er ikke statiske. Ny data, nye brukerkrav og nye verktøy oppstår stadig. Et AI-system som ikke kan jevnt og trygt utvikle både sin “hjerne” og sine “hender” vil uunngåelig bryte.

Forskere identifiserer dette behovet for samtilpasning som den neste fronten. Imidlertid er det en kompleks utfordring. Hvis både agenten og dens verktøy lærer samtidig, hvem får kreditt eller skyld for feil? Hvordan kan du forhindre en ustabil tilbakemeldingsløkke hvor agenten og verktøyene jager hverandres endringer uten å forbedre den totale ytelsen? Tidlige forsøk på dette, som å behandle agent-verktøy-forholdet som et samarbeidende multi-agent-system, avslører vanskeligheten. Uten robuste løsninger for kreditttildeling og stabilitet, forblir selv våre mest avanserte agentic AI en samling imponerende, men frakoplet evner.

Hukommelse som et Førsteklassesystem

En av de mest synlige tegnene på tilpasningsdefisitten er statisk hukommelse. Mange utplasserte agenter blir ikke bedre over tid. De gjentar de samme feilene fordi de ikke kan internalisere erfaring. Hver interaksjon behandles som om det var den første.

Produksjonsmiljøer krever tilpasningshukommelse. Agenter trenger episodisk gjennkalling for å håndtere lange oppgaver, strategisk hukommelse for å finjustere planer, og operativ hukommelse for å unngå å gjenta feil. Uten dette, føles agentene skjøre og upålitelige.

Hukommelse bør behandles som en justerbar komponent, ikke en passiv logg. Systemer som gjennser erfaring, lærer av feil og justerer atferden, er langt mer stabile.

Nye Risikoer fra Adaptive Systemer

Tilpasning introduserer sine egne risikoer. Agenter kan lære å optimalisere målinger i stedet for mål, et fenomen kjent som parasittisk tilpasning. De kan se suksessfulle ut mens de undergraver det underliggende målet. I multi-agent-systemer kan kompromitterte verktøy manipulere agenter gjennom subtile prompt-injeksjon eller misvisende data. For å mildne disse risikoene, trenger agenter robuste verifiseringsmekanismer. Handlinger må være testbare, reversible og auditable. Sikkerhetslag mellom agenter og verktøy sikrer at feil ikke propagerer stille.

Bunnlinjen

For at Agentic AI skal fungere i den virkelige verden, kan det ikke bare være intelligent; det må kunne tilpasse seg. De fleste agenter feiler i dag fordi de er “frosne” i tid, mens den virkelige verden er kompleks og konstant endrer seg. Hvis en AI ikke kan oppdatere sin hukommelse og forbedre seg fra feil, vil den til slutt bryte. Pålidelighet kommer ikke fra en perfekt demo; den kommer fra evnen til å tilpasse seg.

Dr. Tehseen Zia er en fast ansatt associate professor ved COMSATS University Islamabad, med en PhD i AI fra Vienna University of Technology, Østerrike. Som spesialist i kunstig intelligens, maskinlæring, datavitenskap og datavisjon, har han gjort betydelige bidrag med publikasjoner i anerkjente vitenskapelige tidsskrifter. Dr. Tehseen har også ledet flere industriprosjekter som hovedundersøker og tjenestegjort som AI-konsulent.