Lego trouve un moyen inventif de combiner l’IA et le suivi du mouvement

Les systèmes de jouets Lego existent depuis des générations et sont considérés par beaucoup comme un moyen de stimuler l’imagination. Plusieurs utilisateurs ont à un moment donné imaginé avoir une figurine Lego à leur image qu’ils pourraient utiliser avec leurs ensembles.

En réalisant ce fait, Lego a décidé d’essayer de rendre ce rêve réalité. Comme Gizmodo le rapporte, Lego va essayer de réaliser ce rêve pour quiconque visite leur parc à thème qui ouvrira à New York en 2020. Pour cela, l’entreprise va employer un suivi de mouvement sophistiqué et une reconnaissance faciale par réseau de neurones.

Le parc à thème, nommé Legoland New York Resort sera situé à Goshen, New York, à environ 60 miles au nord-ouest de New York, et ouvrira le 4 juillet 2020.

Selon Mobile ID World, cette possibilité sera présentée dans une Lego Factory Adventure Ride « qui prend les invités du parc à travers une visite d’une « usine » leur montrant comment les petites briques en plastique emblématiques sont fabriquées. »

« En utilisant la technologie Holotrack de Holovis, la Lego Factory Adventure Ride présentera un segment où les invités du parc seront transformés en l’une des figures miniatures emblématiques de Lego. Holotrack utilise l’utilisation des mêmes technologies d’intelligence artificielle et d’apprentissage profond qui ont rendu possibles les vidéos deepfake, en prenant l’image d’un individu et en la traduisant sur un écran. Les mini-figures des invités imiteront leurs mouvements et leur apparence, en copiant leurs cheveux, leurs lunettes, leurs vêtements et leurs expressions faciales. Le temps nécessaire pour rendre un invité en une figurine Lego est rapporté à environ une demi-seconde. »

Mais ce n’est certainement pas le nouveau développement d’IA dans lequel Lego est impliqué. En 2013, Lego Engineering a utilisé l’intelligence artificielle pour explorer le mouvement, en utilisant des blocs de construction Lego. En 2014, des chercheurs et des programmeurs ont commencé à utiliser Lego Mindstorms EV3 robot avec l’IA en connectant le cerveau d’un ver à la tête des capteurs et des moteurs d’un EV3 robot en utilisant un programme informatique. Les enthousiastes du développement d’IA ont utilisé Mindstorms EV3 depuis un certain temps maintenant, en essayant particulièrement de développer le mouvement robotique.

En 2004 et 2016, deux projets de recherche ont été publiés qui ont étudié la façon dont Lego pouvait être utilisé pour enseigner l’IA. Le premier a utilisé Lego’s Mindstorms, tandis que le deuxième, publié par Western Washington University, a discuté de 12 ans d’expérience d’enseignement sur l’IA en utilisant des systèmes Lego, y compris EV3.

Mais la plus grande avancée de l’entreprise dans le domaine de l’IA est venue cette année, en août, lorsqu’elle a annoncé qu’elle allait « commencer les essais d’un nouveau système pour aider les personnes ayant des déficiences visuelles à suivre les instructions Lego. »

Le système s’appelle Instructions de construction audio et Braille, et utilise « l’IA pour associer des instructions visuelles numériques traditionnelles avec des directions verbales ou tactiles Braille, et a été développé en collaboration avec un fan de Lego de toute une vie, Matthew Shifrin, qui est aveugle. »

Le système est en phase de développement précoce et prend actuellement en charge « une poignée d’ensembles pour le moment, tandis que l’équipe de développement recherche des commentaires des utilisateurs. » Les commentaires seront utilisés pour mettre en œuvre les commentaires qui ajouteront plus d’ensembles « dans la première moitié de 2020, avec un objectif ultime de soutenir tous les lancements de produits Lego. » Les instructions officielles créées par le nouveau programme d’IA seront disponibles gratuitement sur legoaudioinstructions.com.