Potenza i tuoi sforzi di ML e AI con la trasformazione dei dati – Leader di pensiero

Quanto più vario, veloce e voluminoso è il nostro dati, tanto più è possibile utilizzare analisi predittive e modellazione per prevedere la crescita e identificare aree di opportunità e miglioramento. Tuttavia, per ottenere il massimo valore da strumenti di reporting, machine learning (ML) e intelligenza artificiale (AI) è necessario che un’organizzazione abbia accesso ai dati da molte fonti e assicurarsi che i dati siano di alta qualità e attendibili. Questo è spesso il più grande ostacolo per trasformare i big data in strategia aziendale.

I professionisti dei dati spendono così tanto tempo a raccogliere e convalidare i dati per prepararli all’uso che hanno poco tempo per concentrarsi sul loro obiettivo principale: analizzare i dati e trarre valore aziendale da essi. Non sorprende che il 76 percento dei data scientist affermi che la preparazione dei dati è la parte meno piacevole del loro lavoro. Inoltre, gli sforzi di preparazione dei dati attuali, come la gestione dei dati e la tradizionale ETL, richiedono uno sforzo manuale da parte dei professionisti IT e non sono sufficienti per gestire la scala e la complessità dei big data.

Le aziende che desiderano sfruttare il potere dell’AI devono allontanarsi da questi processi tediosi e in gran parte manuali che aumentano il rischio di risultati “spazzatura dentro, spazzatura fuori”. Invece, hanno bisogno di processi di trasformazione dei dati che estraggono i dati grezzi in molteplici fonti e formati, li uniscono e li normalizzano, e aggiungono valore con logica aziendale e metriche per renderli pronti per l’analisi. Con la trasformazione dei dati complessi, possono essere sicuri che i modelli AI/ML siano basati su dati puliti e precisi che forniscono risultati attendibili.

Sfruttare il potere del cloud con ELT

Il miglior posto per preparare e trasformare i dati oggi è un data warehouse cloud (CDW) come Amazon (AMZN ) Redshift, Google (GOOGL ) BigQuery, Microsoft Azure Synapse o Snowflake. Mentre gli approcci tradizionali alla gestione dei dati richiedono che i dati siano estratti e trasformati prima di poter essere caricati, un CDW sfrutta la scalabilità e le prestazioni del cloud per un’ingestione e trasformazione dei dati più veloce e rende possibile estrarre e caricare i dati da molteplici fonti di dati disparate prima di trasformarli all’interno del CDW.

Idealmente, il modello ELT sposta inizialmente i dati in una sezione del CDW riservata ai dati grezzi di staging. Da lì, il CDW può utilizzare le risorse di calcolo quasi illimitate disponibili per i lavori di integrazione e ETL che puliscono, aggregano, filtrano e uniscono i dati in staging. I dati possono quindi essere trasformati in uno schema diverso – data vault o Star Schema, ad esempio – ottimizzando i dati per la creazione di report e analisi

L’approccio ELT consente inoltre di replicare i dati grezzi all’interno del CDW per una preparazione e trasformazione successive quando e come necessario. Ciò consente di utilizzare strumenti di business intelligence che determinano lo schema in fase di lettura e producono trasformazioni specifiche su richiesta, consentendo effettivamente di trasformare gli stessi dati in più modi man mano che se ne scoprono nuovi utilizzi.

Accelerare i modelli di machine learning

Questi esempi del mondo reale mostrano come due aziende di diversi settori stanno sfruttando la trasformazione dei dati in un CDW per guidare le iniziative AI.

Un’agenzia di marketing e pubblicità boutique ha costruito una piattaforma di gestione dei clienti proprietaria per aiutare i suoi clienti a identificare, comprendere e motivare meglio i loro clienti. Trasformando i dati all’interno di un CDW, la piattaforma integra rapidamente e facilmente i dati dei clienti in tempo reale attraverso canali in una vista a 360 gradi del cliente che informa i modelli AI/ML della piattaforma per rendere le interazioni con i clienti più coerenti, tempestive e personalizzate.

Un’azienda logistica globale che effettua 100 milioni di consegne a 37 milioni di clienti unici in 72 paesi ha bisogno di grandi quantità di dati per alimentare le sue operazioni quotidiane. L’adozione della trasformazione dei dati all’interno di un CDW ha consentito all’azienda di distribuire 200 modelli di machine learning in un solo anno. Questi modelli effettuano 500.000 previsioni ogni giorno, migliorando notevolmente l’efficienza e offrendo un servizio clienti superiore che ha ridotto le chiamate in entrata al call center del 40 percento.

Migliori pratiche per iniziare

Le aziende che desiderano supportare le loro iniziative AI/ML con il potere della trasformazione dei dati nel cloud devono comprendere il loro caso d’uso specifico e le loro esigenze. Iniziare con ciò che si desidera fare con i propri dati – ridurre i costi del carburante ottimizzando le rotte di consegna, aumentare le vendite offrendo le migliori offerte ai rappresentanti del servizio clienti in tempo reale, ecc. – consente di progettare al contrario i processi in modo da poter identificare quali dati forniranno risultati rilevanti.

Una volta determinato quali dati il progetto AI/ML necessita per costruire i propri modelli, è necessario disporre di una soluzione ELT cloud-native che renderà i dati idonei per l’uso. Cerchare una soluzione che:

• Sia neutra per il fornitore e in grado di lavorare con la propria attuale pila tecnologica

• Sia sufficientemente flessibile per scalare verso l’alto e verso il basso e adattarsi man mano che la pila tecnologica cambia

• Possano gestire trasformazioni dei dati complesse da molteplici fonti di dati

• Offra un modello di prezzi pay-as-you-go in cui si paga solo per l’uso effettivo

• Sia progettata per il proprio CDW preferito in modo da poter sfruttare appieno le funzionalità del CDW per eseguire lavori più velocemente e trasformare i dati in modo trasparente.

Una soluzione di trasformazione dei dati cloud che si adatta ai denominatori comuni di tutti i CDW può offrire un’esperienza coerente, ma solo una soluzione che consente le potenti funzionalità differenzianti del proprio CDW scelto può fornire le prestazioni elevate che accelerano il tempo di insight. La soluzione giusta consentirà di alimentare i propri progetti AI/ML con più dati puliti e attendibili da più fonti in meno tempo – e generare risultati più rapidi e affidabili che guidano un valore aziendale e un’innovazione precedentemente irrealizzati.