Wybór magazynu wspierającego inicjatywy AI/ML

Przez Candida Valois, Field CTO, Americas, Scality

Adopcja ML i AI ciągle rośnie, co nie jest zaskakujące, biorąc pod uwagę wgląd biznesowy i transformację branżową, które zapowiadają ich liczne przypadki użycia. PwC przewiduje, że do 2030 roku AI może przyczynić się do prawie 16 bilionów dolarów do globalnej gospodarki. To oznacza wzrost o 26% PKB dla lokalnych gospodarek.

Te technologie wymagają ogromnych ilości nieustrukturyzowanych danych, aby funkcjonować, a te dane często przyjmują postać filmów, obrazów, tekstu i głosu. Obciążenia tego typu wymagają nowego podejścia do przechowywania danych; stare metody nie są wystarczające. Z pojawieniem się takich obciążeń aplikacje potrzebują szybkiego dostępu do ogromnych ilości danych – danych, które są tworzone wszędzie: w chmurze, na krawędziach i na miejscu. Te intensywne obciążenia wymagają niskiej latencji, możliwości obsługi różnych typów i rozmiarów ładunków oraz możliwości skalowania liniowego.

Czego potrzeba, to nowe podejście do dostarczania danych, które jest ukierunkowane na aplikację, a nie na lokalizację lub technologię. Z dużą skalą adopcji AI/ML i analityki, liderzy IT w przedsiębiorstwach potrzebują znaczącej zmiany w sposobie myślenia o zarządzaniu danymi i przechowywaniu.

Obsługa wszystkich rozmiarów plików

W odniesieniu do obciążeń AI/ML i przechowywania danych, organizacje potrzebują rozwiązania, które może obsłużyć różne typy obciążeń, zarówno małe, jak i duże pliki. W niektórych przypadkach może być konieczne radzenie sobie z kilkoma dziesiątkami terabajtów, podczas gdy w innych przypadkach jest wiele petabajtów. Nie wszystkie rozwiązania są przeznaczone dla dużych plików, tak jak nie wszystkie mogą obsłużyć bardzo małe. Sztuczką jest znalezienie takiego, które może obsłużyć oba w elastyczny sposób.

Skalowalność jest niezbędna

Aby zapewnić dokładność i szybkość, organizacje wymagają ogromnych zbiorów danych, ponieważ to jest to, czego potrzebują algorytmy AI/ML, aby właściwie przeszkolić podstawowe modele. Organizacje chcą rosnąć pod względem pojemności i wydajności, ale często są hamowane przez tradycyjne rozwiązania przechowywania. Kiedy próbują skalować liniowo, nie są w stanie. Obciążenia AI/ML wymagają rozwiązania przechowywania, które może skalować się nieograniczenie, gdy dane rosną.

Kilka set terabajtów maksymalizuje standardowe rozwiązania przechowywania plików i bloków; po tym nie mogą skalować. Przechowywanie obiektowe może skalować się nieograniczenie, elastycznie i bezproblemowo na podstawie popytu. A co ważne w przechowywaniu obiektowym w porównaniu z tradycyjnym przechowywaniem, to fakt, że jest to całkowicie płaska przestrzeń, w której nie ma ograniczeń. Użytkownicy nie napotkają ograniczeń, które znaleźliby w tradycyjnym przechowywaniu.

Spełnianie wymagań wydajności

Skalowanie pojemności jest ważne, ale nie wystarcza. Organizacje również potrzebują możliwości skalowania liniowego pod względem wydajności. Niestety, wiele tradycyjnych rozwiązań przechowywania nie pozwala na to. Kiedy organizacja potrzebuje skalować liniowo pod względem pojemności, wydajność ma tendencję do spadku.

Standardowy paradygmat przechowywania składa się z plików zorganizowanych w hierarchię, z katalogami i podkatalogami. Ta architektura działa bardzo dobrze, gdy pojemność danych jest mała, ale gdy pojemność rośnie, wydajność cierpi w pewnym momencie z powodu wąskich gardeł systemu i ograniczeń związanych z tabelami wyszukiwania plików. Przechowywanie obiektowe zapewnia jednak nieograniczoną płaską przestrzeń nazw, dzięki czemu można skalować do petabajtów i więcej, dodając po prostu dodatkowe węzły. Dlatego można skalować wydajność, gdy się skaluje pojemność.

Przechowywanie, które może wspierać projekty AI/ML

Organizacje muszą przyjąć nowe podejście do przechowywania, gdy AI i ML zyskują na popularności. To nowe podejście musi umożliwić im ustanowienie, uruchomienie i skalowanie swoich inicjatyw AI/ML w odpowiedni sposób. Szkolenie AI/ML jest wyraźną potrzebą, więc niektóre z dostępnego dziś oprogramowania przechowywania obiektowego jest zaprojektowane, aby spełnić tę potrzebę. Przedsiębiorstwa mogą rozpocząć swoje inicjatywy na małą skalę, zaczynając od jednego serwera, a następnie skalować w razie potrzeby, zarówno pod względem pojemności, jak i wydajności. Te projekty również wymagają wydajności dla swoich aplikacji analitycznych, a szybkie przechowywanie obiektowe zapewnia ją. Ponadto, przechowywanie obiektowe zapewnia pełne zarządzanie cyklem życia danych w wielu chmurach i umożliwia elastyczność od krawędzi do rdzenia.

Przedsiębiorstwa muszą przetwarzać dane wydajnie, a przechowywanie obiektowe robi to, pozwalając aplikacjom łatwo uzyskać dostęp do danych na miejscu, nawet w wielu chmurach. Jego niska latencja, skalowalność i elastyczność sprawiają, że przechowywanie obiektowe jest silnym sojusznikiem dla inicjatyw AI/ML.