L’avenir des lunettes de réalité augmentée est alimenté par l’IA

Les progrès de l’intelligence artificielle dominent la conversation grand public. Les applications de l’IA semblent illimitées – et il n’est pas surprenant qu’elles transforment notre monde et notre façon d’interagir avec lui. Comme de nombreuses autres industries, cela s’applique particulièrement à la réalité augmentée.

Les modèles d’IA sont déjà utilisés pour créer des expériences de réalité augmentée immersives – notamment sur les applications de dispositifs mobiles. Les domaines de la réalité augmentée et de l’intelligence artificielle travaillent ensemble pour créer des expériences intuitives et uniques qui mélangent plus étroitement les mondes réel et numérique. La prochaine frontière dans le développement de l’IA et de la RA est la mise en œuvre de capacités d’IA avancées dans les lunettes de réalité augmentée grand public pour étendre les possibilités d’engagement immersif.

L’IA générative accélérera la création de mondes 3D, et créera des possibilités illimitées pour les porteurs de créer leurs propres réalités

L’IA générative présente des progrès dans les algorithmes, les modèles de langage et la puissance de traitement accrue pour exécuter les calculs nécessaires pour cartographier et interagir avec le monde physique.

Jusqu’à présent, il y a des limites sur les modèles 3D dans les lunettes de réalité augmentée parce qu’ils sont essentiellement manuels. Cependant, l’IA générative les créerait très rapidement et de manière autonome. L’IA générative dans les lunettes de réalité augmentée aidera à construire des modèles 3D plus rapidement, débloquant le plein potentiel de la RA. Cette création du monde numérique, pour superposer le monde physique, sera plus rapide, plus complète et immersive sans travail manuel intensif nécessaire.

L’IA générative transformera également l’expérience utilisateur et notre façon d’interagir avec l’espace physique. Avec des lunettes de réalité augmentée alimentées par l’IA générative, les porteurs peuvent littéralement transposer leurs imaginations dans le monde réel. Sans avoir besoin de coder, les porteurs peuvent utiliser la reconnaissance vocale pour « parler » leurs images et objets 3D à travers leurs lunettes de réalité augmentée exactement comme ils le veulent. Ils pourraient dire : « imaginez qu’il y a un dauphin qui nage dans la pièce » – et il apparaîtrait devant eux. Les possibilités pour cette immersion sont virtuellement illimitées pour le divertissement, le travail et au-delà.

Les lunettes de réalité augmentée qui emploient l’IA générative changeront également le monde du jeu pour créer une expérience de jeu plus immersive et personnalisée. Par exemple, avec ChatGPT, il sera plus facile de créer des personnages plus réalistes et d’ajouter de nouvelles quêtes ou mondes de jeu. Il pourrait également être utilisé pour améliorer l’expérience de jeu en analysant le comportement du joueur et en rendant le jeu plus facile ou plus difficile pour le joueur en temps réel, en personnalisant l’expérience de manière autonome.

La traduction de l’IA de la parole et du texte écrit réduira les barrières linguistiques

La reconnaissance automatique de la parole (ASR) utilise la reconnaissance audiovisuelle de la parole par réseau neuronal (un algorithme qui repose sur le traitement d’images pour extraire le texte). Cela peut traduire le texte écrit – comme celui d’un menu dans un pays étranger – dans votre langue maternelle en temps réel.

Lorsqu’il est appliqué dans les lunettes de réalité augmentée, il peut fournir des sous-titres en temps réel dans votre langue maternelle tandis que quelqu’un parle dans une autre langue – le tout dans les cadres de vos lunettes de réalité augmentée. Cela élimine la frustration des touristes et des hommes d’affaires qui tentent de communiquer dans la langue locale et favorise ainsi un monde plus communicatif et collaboratif.

La reconnaissance de texte et la traduction combinent les techniques de reconnaissance optique de caractères (ROC) de l’IA avec les moteurs de traduction texte à texte tels que DeepL. Les moteurs d’IA tels que Stable Diffusion peuvent également augmenter la communication avec des animations ou d’autres aides visuelles qui peuvent aider à transmettre des concepts complexes ou détaillés. Cela approfondit l’engagement de l’utilisateur : un paire de lunettes de réalité augmentée qui utilise cette IA peut afficher une image ou une vidéo correspondante en temps réel qui est pertinente pour ce que l’utilisateur dit devant lui lors d’un panel ou d’une présentation. Google a récemment annoncé le développement de lunettes de réalité augmentée avec cette fonctionnalité.

Cela permet également à la communauté sourde de s’engager dans des conversations quotidiennes sans avoir besoin de lire sur les lèvres ou de faire du contact visuel en transformant instantanément l’audio en sous-titres affichés devant les yeux du porteur.

L’IA fait sentir sa présence dans les soins de santé, l’éducation et de nombreux autres domaines. Bientôt, nous aurons des lunettes de réalité augmentée intelligentes qui, comme la science-fiction populaire, transporteront les gens dans des environnements de réalité augmentée ou virtuelle où l’IA cartographie rapidement la pièce et la position du locuteur pour rendre la communication virtuelle plus fluide et moins fastidieuse, quelle que soit la localisation de l’une ou l’autre des parties.

L’IA aide les lunettes de réalité augmentée à détecter et à étiqueter facilement les objets dans le monde réel – approfondissant l’engagement.

Les algorithmes de réseau neuronal convolutif (RNC) dans la détection d’objets sont actuellement utilisés dans les appareils mobiles pour estimer la position et l’étendue des objets dans une scène. Une fois qu’il détecte un objet, le logiciel de RA peut superposer du texte sur celui-ci ou générer un autre objet dans le monde physique, et créer une interaction entre les deux. Les objets qui sont transposés dans le monde réel ont de nombreuses applications, notamment l’instruction, la navigation, la diététique et la nutrition, et bien d’autres.

Lorsque vous portez un paire de lunettes de réalité augmentée avec ces capacités d’IA, par exemple, un utilisateur peut se promener dans les rues de n’importe quelle ville et apprendre sur n’importe quel monument en temps réel en le regardant. Les lunettes de réalité augmentée peuvent identifier, étiqueter et fournir des informations sur la ville et ses monuments – le tout à travers les cadres du porteur. À mesure que la technologie de reconnaissance d’objets s’améliore, les données nutritionnelles telles que les calories, les protéines, les graisses et le cholestérol de tout aliment et taille de portion seront disponibles. Dans l’intervalle, les codes QR simples sur les produits feront apparaître les détails nutritionnels pour les utilisateurs.

En dehors de la détection d’objets pure, le logiciel de reconnaissance faciale est également devenu courant pour la détection de personnes. Déjà, la reconnaissance faciale est en plein essor dans l’industrie aérienne, car de plus en plus de vols utilisent la technologie pour confirmer l’identité d’un passager – ajoutant ainsi une couche de sécurité supplémentaire et accélérant le processus d’embarquement. La reconnaissance faciale, lorsqu’elle est utilisée dans les lunettes de réalité augmentée, pourrait donner le pouvoir de reconnaissance aux porteurs partout. Par exemple, dans un avenir proche, avec des lunettes de réalité augmentée, vous pourriez rencontrer d’autres personnes sur les réseaux sociaux et obtenir instantanément des informations sur leur profil avant de décider si vous souhaitez les « suivre » ou vous connecter avec eux.

Les lunettes de réalité augmentée alimentées par l’IA sont en train de changer notre vie et leurs visuels et capacités continueront de s’améliorer. Dans notre monde de plus en plus connecté, elles simplifient les tâches et brisent les barrières qui, il y a quelques années à peine, étaient considérées comme infranchissables. Les progrès de l’intelligence artificielle se produisent à un rythme si rapide que, au cours des 10 prochaines années, l’IA fera plus de progrès que dans les 50 précédentes. Que ce soit dans le gouvernement, les entreprises ou un environnement personnel, l’intelligence artificielle fusionnera bientôt avec les lunettes de réalité augmentée pour fusionner nos environnements physiques et numériques.