AR, XR i interfejsy mózgowe

Przyszłość okularów AR to AI

mm
Dodaj Unite.AI do preferowanych źródeł w Google

Postępy w dziedzinie sztucznej inteligencji dominują w głównym nurcie dyskusji. Zastosowania AI wydają się nieograniczone – i nie jest zaskoczeniem, że zmienią one nasz świat i sposób, w jaki z nim interaktywnie wchodzimy w kontakt. Wraz z wieloma innymi branżami, szczególnie dotyczy to rzeczywistości rozszerzonej.

Modele AI są już wykorzystywane do tworzenia immersyjnych doświadczeń AR – szczególnie w aplikacjach na urządzeniach mobilnych. Dziedziny rzeczywistości rozszerzonej i sztucznej inteligencji współpracują, aby stworzyć intuicyjne, unikalne doświadczenia, które jeszcze bardziej łączą światy realny i cyfrowy. Następny krok w rozwoju AI i AR to wdrożenie zaawansowanych możliwości AI w okularach AR, aby rozszerzyć możliwości immersyjnego zaangażowania.

Generative AI przyspieszy tworzenie światów 3D i stworzy nieograniczone możliwości dla użytkowników, aby tworzyć własne rzeczywistości

Funkcje Generative AI obejmują postępy w algorytmach, modelach językowych i zwiększonej mocy obliczeniowej dostępnej do wykonywania niezbędnych obliczeń w celu mapowania i interakcji ze światem fizycznym.

Do tej pory istnieją ograniczenia modeli 3D w okularach AR, ponieważ są one podstawowo ręczne. Jednak Generative AI mogłoby tworzyć je bardzo szybko i autonomicznie. Generative AI w okularach AR pomoże w budowaniu modeli 3D szybciej, odblokowując pełny potencjał AR. To tworzenie świata cyfrowego, aby nałożyć go na świat fizyczny, będzie szybsze, bardziej kompletne i immersyjne bez potrzeby intensywnej ręcznej pracy.

Generative AI również zmieni doświadczenie użytkownika i sposób, w jaki wchodzimy w interakcje ze światem fizycznym. Z okularami AR z funkcjami Generative AI, użytkownicy mogą literalnie przenieść swoją wyobraźnię do świata rzeczywistego. Bez potrzeby kodowania, użytkownicy mogą używać rozpoznawania głosu, aby “mówić” swoje obrazy i obiekty 3D przez okulary AR dokładnie tak, jak chcą. Mogliby powiedzieć: “wyobraź sobie, że jest delfin pływający przez pokój” – i pojawiłby się przed nimi. Możliwości tej immersji są praktycznie nieograniczone dla rozrywki, pracy i poza nimi.

Okulary AR, które wykorzystują Generative AI, również zmienią świat gier, tworząc o wiele bardziej immersyjne i personalizowane doświadczenie gry. Na przykład, z ChatGPT, będzie łatwiej tworzyć bardziej realistyczne postacie i dodawać nowe misje lub światy gry. Mogą również być wykorzystane do poprawy doświadczenia gry, analizując zachowanie gracza i dostosowując grę do poziomu trudności w czasie rzeczywistym, dostosowując doświadczenie autonomicznie.

AI-enabled translation of speech + written text will reduce language barriers

Automatic Speech Recognition (ASR) wykorzystuje sieci neuronowe do rozpoznawania mowy i tekstu (algorytm oparty na przetwarzaniu obrazu do ekstrakcji tekstu). Może to tłumaczyć tekst napisany – jak ten na menu w obcym kraju – na język ojczysty w czasie rzeczywistym.

Gdy zastosowane w okularach AR, mogą one zapewnić napisy w czasie rzeczywistym w języku ojczystym, podczas gdy ktoś mówi w innym języku – wszystko w ramach okularów AR. To eliminuje frustrację turystów i ludzi biznesu, którzy starają się komunikować w języku lokalnym, tworząc bardziej komunikatywny i współpracujący świat.

Rozpoznawanie tekstu i tłumaczenie łączą techniki AI Optical Character Recognition (OCR) z silnikami tłumaczeń tekstu na tekst, takimi jak DeepL. Silniki AI, takie jak Stable Diffusion, mogą również uzupełnić komunikację animacjami lub innymi pomocami wizualnymi, które mogą pomóc w przekazaniu złożonych lub szczegółowych pojęć. To pogłębia zaangażowanie użytkownika: para okularów AR z tym AI może wyświetlić odpowiednią ilustrację lub film w czasie rzeczywistym, który jest istotny dla tego, co użytkownik mówi przed nimi na panelu lub prezentacji. Google niedawno zapowiedział rozwój okularów AR z tą funkcjonalnością.

To również umożliwia społeczności głuchych angażować się w codzienne rozmowy bez potrzeby odczytywania z ruchu warg lub nawiązywania kontaktu wzrokowego, natychmiast przekształcając dźwięk w napisy wyświetlane przed oczami użytkownika.

AI jest coraz bardziej widoczne w opiece zdrowotnej, edukacji i wielu innych dziedzinach. Wkrótce będziemy mieli inteligentne okulary AR, które, jak popularna fantastyka naukowa, przeniosą ludzi do środowisk rzeczywistości rozszerzonej lub wirtualnej, gdzie AI szybko mapuje pokój i pozycję mówcy, aby uczynić wirtualną komunikację bezproblemową i mniej uciążliwą, niezależnie od lokalizacji którejkolwiek ze stron.

AI pomaga okularom AR łatwo wykrywać i oznaczać obiekty w świecie rzeczywistym – pogłębiając zaangażowanie.

Algoritmy sieci neuronowej (CNN) w wykrywaniu obiektów są obecnie wykorzystywane w urządzeniach mobilnych do oszacowania położenia i zakresu obiektów w scenie. Gdy wykryje obiekt, oprogramowanie AR może nałożyć tekst na niego lub wygenerować inny obiekt w świecie fizycznym, tworząc interakcję między nimi. Obiekty przeniesione do świata rzeczywistego mają wiele zastosowań, w tym instrukcje, nawigację, dietę i żywienie, oraz wiele innych.

Gdy użytkownik nosi okulary AR z tymi możliwościami AI, na przykład, może spacerować ulicami dowolnego miasta i dowiedzieć się o każdym punkcie orientacyjnym w czasie rzeczywistym, patrząc na niego. Okulary AR mogą identyfikować, oznaczać i zapewnić informacje o mieście i jego punktach orientacyjnych – wszystko przez ramy okularów. Gdy technologia rozpoznawania obiektów się poprawi, dane odżywcze, takie jak kalorie, białko, tłuszcz i cholesterol każdego produktu i porcji, będą dostępne. Tymczasem proste kody QR na produktach wywołają szczegóły odżywcze dla użytkowników.

Poza samym wykrywaniem obiektów, oprogramowanie do rozpoznawania twarzy staje się również powszechne w przypadku ludzi wykrywania. Już teraz rozpoznawanie twarzy rozwija się w branży lotniczej, ponieważ coraz więcej lotów wykorzystuje tę technologię do potwierdzenia tożsamości pasażera – dodając dodatkową warstwę bezpieczeństwa i przyspieszając proces wejścia na pokład. Rozpoznawanie twarzy, gdy zastosowane w okularach AR, mogłoby dać użytkownikom możliwość rozpoznawania innych. Na przykład, w niedalekiej przyszłości z okularami AR, możesz spotkać się z innymi w mediach społecznościowych i uzyskać ich informacje tła natychmiast przed podjęciem decyzji, czy chcesz “przyjaciela” lub połączyć się z nimi.

Okulary AR z AI zmieniają nasze życie, a ich wizualizacje i możliwości będą nadal się poprawiać. W naszym coraz bardziej połączonym świecie, upraszczają zadania i łamią bariery, które tylko kilka lat temu były uważane za nieprzezwyciężalne. Postępy w dziedzinie sztucznej inteligencji następują tak szybko, że w ciągu najbliższych 10 lat AI zrobi więcej postępu niż w poprzednich 50 latach. Niezależnie od tego, czy jest to rząd, biznes czy środowisko osobiste, sztuczna inteligencja wkrótce połączy się z okularami AR, aby połączyć nasze środowiska fizyczne i cyfrowe.

Ari Grobman jest CEO w Lumus. Ari jest weteranem branży AR z prawie 15-letnim doświadczeniem w komercjalizacji optyki Lumus. W swojej poprzedniej roli w Lumus jako VP Business Development, Ari przedstawił Lumus wiodącym firmom technologicznym na całym świecie. Przynosi on głęboką wiedzę na temat branży AR do firmy.