Tankeledere

Hvorfor datakvalitet avgjør om bedriftens AI lykkes eller mislykkes

mm
Legg til Unite.AI blant dine foretrukne kilder på Google

Siden OpenAI lanserte ChatGPT i slutten av 2022, har hver enkelt bedrift kjempet for å gå raskere med AI. Store hardware-aktører som Nvidia selger flere grafikkprosessorer enn noen gang, mens store modellbyggere som OpenAI og Anthropic fortsetter å bygge større og større modeller.

Likevel, selv med de mest avanserte modellene og de største budsjettene, svikter mange AI-prosjekter likevel. Vi har sett dette skje over hele industrien, fra helsevesen til transport til finans og mer. Årsaken er ikke vanskelig å forstå: AI er bare like bra som dataen den er trent på og den dataen den mottar i sanntid. Når denne dataen er dårlig merket, utdatert eller ufullstendig, kan ingen modell levere konsekvente eller pålitelige resultater.

Og det er det store problemet mange bedrifter står overfor i dag. De investerer tungt i AI-verktøy, mens deres datasystemer forblir spredte og upålitelige. Resultatet er en illusjon av fremgang. Mens modellene produserer imponerende svar, er innsiktene ofte basert på svake grunnlag. Den virkelige barrieren for AI-suksess er ikke modellprestasjon. Det er datakvalitet.

Hva god data virkelig betyr

Høykvalitetsdata handler ikke bare om nøyaktighet. Det betyr informasjon som er aktuell, fullstendig og relevant for problemet som skal løses. Tenk deg en kunde som prøver å avbestille en bestilling på en e-handelsnettsted. Systemet må sjekke bestillingsdetaljene, leveringsstatusen og betalingsrekorden. Hvis noen av disse datapunktene ligger i separate systemer som ikke snakker sammen, vil AI-assistenten svikte i å gi et nyttig svar.

God data kobler disse punktene umiddelbart. Det lar AI se et fullstendig bilde i stedet for fragmenter av det. Dårlig data, på den andre siden, tvinger modellen til å gjette. Og når AI begynner å gjette, gjør den feil som kan koste penger og skade tillit. Nylige eksempler viser hvordan farlig slike antagelser kan være.

New York Citys forretnings-chatbot ga ulovlig råd fordi den hentet informasjon fra utdatert eller ufullstendig juridisk informasjon. Air Canadas kundeservice-bot ga feil refundasjonskrav fordi den manglet kontekst fra selskapets politikk. Selv store rekrutteringssystemer har feilaktig filtrert kandidater på grunn av forvrengt eller feilmerket data, som vi ser i EEOCs første AI-relaterte avtale. Disse feilene er ikke bare tekniske. De er også omdømmesskader og økonomiske, og de stammer fra AI-systemer som ble trent på upålitelig data.

Bransjestudier bekrefter omfanget av dette problemet. Gartner rapporterer at 80 prosent av AI-prosjektene svikter å skala på grunn av dårlig datakvalitet og styring. Liksom en undersøkelse fra MIT Sloan Management Review fant at data-problemer, ikke algoritmer, er den viktigste årsaken til at bedriftens AI-prosjekter kollapser.

Kultur betyr like mye som kode

Forbedring av datakvalitet er ikke noe du kan fikse med ett enkelt verktøy eller kommando. Det krever en kulturell endring. Derfor må bedriftsledere behandle data som et levende system som trenger omsorg og ansvar. Dette handler ikke bare om å erklære at du vil “gjøre dataene bedre” – det er ikke nok. Hver del av organisasjonen må forstå hvordan informasjon flytter seg, hvem eier den, og hva som skjer når den endres.

Vi har sett hvordan dette spiller ut i virkelige systemer. Mange AI-applikasjoner er avhengige av nattlige dataoppdateringer. Hvis din database oppdateres en gang om dagen, vil modellens kunnskap alltid ligge etter virkeligheten. I raskt foranderlige miljøer kan denne forsinkelsen bety utdatert innsikt og dårlige beslutninger. Bedrifter må omdefinere hele dataflyten sin, fra hvordan informasjon samles inn til hvordan den leveres til modellen.

Å gjøre dette godt kan spare enorm tid og kostnad. Når datapiper er designet med klarhet og formål, kan AI-systemer lære og handle på den mest aktuelle og relevante informasjonen. Når de ikke er, tilbringer teamene mer tid på å rense data enn å bruke dem.

Eksperter i datastyring påpeker ofte at nøkkel til sterk datakvalitet er en tilbakemeldingsløkke mellom mennesker, prosesser og plattformer. Uten denne løkken blir informasjonen stående og modellene mister kontakten med virkelige forhold – et problem som noen ganger kalles data-drift.

Å balansere hastighet med integritet

Det er ofte en spenning mellom å gå raskt og å holde nøyaktighet. Mange organisasjoner ønsker umiddelbare resultater fra sine AI-investeringer, men å rush kan føre til større problemer senere. Målet bør være data-agilitet med integritet. Med andre ord, bygging av systemer som kan flytte raskt uten å tape presisjon.

For å nå dette må hver bedrift definere klare veier for data å flyte fra kilden til modellen i sanntid. Det hjelper også å definere hva slags informasjon som er tillatt inn og hva som må holde seg utenfor. Følsom eller privat data bør aldri nå modellen, selv om brukeren teknisk sett har tilgang til den. Å beskytte denne grensen bygger tillit og holder AI-systemer fra å lekke eller misbruke informasjon.

Etterhvert som AI blir mer autonom, vil menneskelig tilsyn forbli kritisk. Modellen bør ikke ha full kontroll over forretningsbeslutninger. Den bør heller ikke ta noen beslutninger. I stedet bør den gjøre forespørsler. Enda viktigere, mennesker må alltid gjennomgå og godkjenne handlingene dens for å sikre at de er i samsvar med bedriftens politikk og reguleringer.

Bygging for kvalitet fra grunnen av

Å opprettholde datakvalitet i stor skala er ikke bare en sak om å rense feil. Det begynner med arkitektur. Du må identifisere hvor din mest pålitelige data bor, og deretter designe et system som bringer den sammen i ett pålitelig sted. Derfra kan du spore hva slags data modellen bruker og hvor den kommer fra.

Dette tilnærmingen forebygger forvirring og holder systemet transparent. Det hjelper også teamene å feilsøke raskere når noe går galt. Når du vet nøyaktig hvilken data som har ført til modellens svar, kan du verifisere og korrigere feil før de sprer seg.

Fremtiden for bedriftens AI vil tilhøre bedrifter som integrerer kvalitet i infrastrukturen som standard. Vi forventer å se flere plug-and-play AI-systemer som håndterer både resonnering og data-integrasjon i ett pakke. Disse “AI-appliansene” kan gjøre det enklere for organisasjoner å deployere smarte systemer uten å tape kontroll over dataene sine.

Analytikere forutser at organisasjoner som kan samordne og styre dataene sine effektivt, vil se raskere adopsjon og høyere avkastning fra AI-prosjektene. En nylig rapport om data-klarhet forklarer at denne evnen skiller bedrifter som innoverer kontinuerlig fra de som stopper etter tidlige pilotprosjekter. Forskjellen kommer ofte ned til om deres AI-systemer er bygget på konsistent, velstrukturert informasjon.

Bunnen av saken

Datakvalitet kan kanskje ikke høres spennende ut i sammenligning med gjennombrudd i modell-design, men det er den stille kraften som avgjør om AI lykkes eller svikter. Uten ren, aktuell og konsistent data, vil selv de smarteste systemene stolpe. Med det, kan selv beskjedne AI-prosjekter skape varig verdi.

Hver leder som investerer i AI bør stille seg et enkelt spørsmål: Kan vi stole på dataene som driver våre beslutninger? Fra det vi har sett, er det bedriftene som kan svare “ja” med sikkerhet som allerede leder i AI-kappløpet.

Oren Eini er grunnlegger og administrerende direktør i RavenDB, en multi-modell NoSQL-dokumentdatabase som er tillit av utviklere og bedrifter verden over. I tillegg til å være drivkraften bak veksten og utvidelsen av RavenDB-databasen, er Oren en ivrig blogger og taler regelmessig på bransjearrangementer over hele verden.