Fremme dine ML- og AI-bestræbelser med dataomdannelse – Tankeledere

Jo større variation, hastighed og mængde af data, vi har, jo mere kan vi bruge predictive analytics og modellering til at forudsige vækst og identificere områder for forbedring og forbedring. Men for at få den største værdi fra rapportering, machine learning (ML) og kunstig intelligens (AI)-værktøjer kræver det, at en organisation kan få adgang til data fra mange kilder og sikre, at data er af høj kvalitet og troværdig. Dette er ofte den største barriere for at omdanne big data til forretningsstrategi.

Datafagfolk bruger så meget tid på at indsamle og validere data for at forberede det til brug, så de har kun lidt tid tilbage til at fokusere på deres primære formål: at analysere data og udlede forretningsværdi fra det. Det er ikke overraskende, at 76 procent af datavidenskabsmænd siger, at dataforberedelse er den mindst behagelige del af deres job. Desuden kræver nuværende dataforberedelsesindsats som data-wrangling og traditionel ETL manuel indsats fra IT-fagfolk og er ikke nok til at håndtere skalaen og kompleksiteten af big data.

Virksomheder, der ønsker at udnytte kraften af AI, må bryde ud af disse kedelige og overvejende manuelle processer, der øger risikoen for “skrald ind, skrald ud”-resultater. I stedet har de brug for dataomdannelsesprocesser, der udtrækker rådata fra multiple kilder og formater, sammenføjer og normaliserer dem og tilføjer værdi med forretningslogik og metrikker for at gøre dem klar til analytics. Med kompleks dataomdannelse kan de være sikre på, at AI/ML-modellerne er baseret på rene, nøjagtige data, der leverer troværdige resultater.

Fremme kraften af skyen med ELT

Det bedste sted at forberede og omdanne data i dag er en skydatawarehouse (CDW) som Amazon (AMZN ) Redshift, Google (GOOGL ) BigQuery, Microsoft Azure Synapse eller Snowflake. Mens traditionelle tilgange til datawarehousing kræver, at data udtrækkes og omdannes, før det kan indlæses, udnytter en CDW skyens skalerbarhed og ydeevne til hurtigere dataindtagelse og -omdannelse og gør det muligt at udtrække og indlæse data fra mange forskellige datakilder, før det omdannes inde i CDW.

Ideelt set flytter ELT-modellen først data ind i en sektion af CDW, der er reserveret til rå staging-data. Herfra kan CDW bruge sine næsten ubegrænsede beregningsressourcer til dataintegration og ETL-job, der rensker, aggregaterer, filterer og sammenføjer det stagede data. Data kan derefter omdannes til en anden skema – data-vælt eller Star-skema, for eksempel, optimerer data til rapportering og analytics

ELT-tilgangen tillader også, at du replikerer rådata inde i CDW til senere forberedelse og omdannelse, når og som det er nødvendigt. Dette giver dig mulighed for at bruge business intelligence-værktøjer, der bestemmer skema på læsning og producerer specifikke omdannelser på krav, hvilket effektivt giver dig mulighed for at omdanne det samme data på flere måder, når du opdager nye brugsområder for det.

Accelerere machine learning-modeller

Disse virkelige eksempler viser, hvordan to virksomheder i forskellige brancher udnytter dataomdannelse i en CDW til at drive AI-initiativer.

En boutique-markedsførings- og reklamebureau byggede en proprietær kundestyringsplatform til at hjælpe deres kunder med at bedre identificere, forstå og motivere deres kunder. Ved at omdanne data inde i en CDW integrerede platformen hurtigt og let realtidskundedata på tværs af kanaler i en 360-graders kundesyn, der informerede platformens AI/ML-modeller om at gøre kundeinteraktioner mere konsekvente, tidlige og personlige.

En global logistikvirksomhed, der leverer 100 millioner leverancer til 37 millioner unikke kunder i 72 lande, har brug for enorme mængder data til at drive deres daglige operationer. Ved at antage dataomdannelse inde i en CDW kunne virksomheden udvikle 200 machine learning-modeller på ét år. Disse modeller laver 500.000 forudsigelser hver dag, hvilket betydeligt forbedrer effektiviteten og driver en overlegen kundeservice, der har reduceret indgående opkald til kundeservice med 40 procent.

Bedste praksis for at komme i gang

Virksomheder, der ønsker at støtte deres AI/ML-initiativer med kraften af dataomdannelse i skyen, må forstå deres specifikke brugstilfælde og behov. Ved at starte med, hvad du vil gøre med dine data – reducere brændstofomkostningerne ved at optimere leveringsruter, øge salget ved at levere det bedste tilbud til kundeserviceagenter i realtid osv. – kan du omvendt konstruere dine processer, så du kan identificere, hvilke data der vil levere relevante resultater.

Når du først har bestemt, hvilke data dit AI/ML-projekt har brug for til at bygge sine modeller, har du brug for en sky-naturlig ELT-løsning, der kan gøre dine data klar til brug. Søg efter en løsning, der:

• Er vendor-uafhængig og kan arbejde med din nuværende teknologi-stak

• Er tilstrækkelig fleksibel til at skala op og ned og tilpasse sig, når din teknologi-stak ændrer sig

• Kan håndtere komplekse dataomdannelser fra multiple datakilder

• Tilbyder en betal-per-brug-prismodel, hvor du kun betaler for, hvad du bruger

• Er specialbygget til din foretrukne CDW, så du kan fuldt ud udnytte CDW’ens funktioner til at køre job hurtigere og omdanne data uden problemer.

En skydataomdannelsesløsning, der tilgodeser de fælles nævner for alle CDW’er, kan give en konsistent oplevelse, men kun en løsning, der aktiverer de kraftfulde differentierende funktioner af din valgte CDW, kan levere den høje ydeevne, der accelererer tid til indsigt. Den rigtige løsning giver dig mulighed for at fremme dine AI/ML-projekt med mere rent, troværdigt data fra flere kilder på kortere tid – og generere hurtigere, mere pålidelige resultater, der driver tidligere urealiseret forretningsværdi og innovation.