Lego trouve un moyen inventif de combiner l’IA et le suivi du mouvement

Les systèmes de jouets Lego existent depuis des générations et sont considérés par beaucoup comme un moyen de stimuler l’imagination. Beaucoup d’utilisateurs ont à un moment donné imaginé avoir une figurine Lego à leur image qu’ils pourraient utiliser avec leurs ensembles.

Conscient de ce fait, Lego a décidé d’essayer de rendre ce rêve réalité. Comme Gizmodo le rapporte, Lego va essayer de réaliser ce rêve pour quiconque visite leur parc à thème qui ouvrira à New York en 2020. Pour cela, l’entreprise va utiliser un suivi de mouvement sophistiqué et une reconnaissance faciale par réseau neuronal.

Le parc à thème, nommé Legoland New York Resort sera situé à Goshen, New York, à environ 60 miles au nord-ouest de New York, et ouvrira le 4 juillet 2020.

Selon Mobile ID World, cette possibilité sera présentée dans une Lego Factory Adventure Ride « qui emmène les invités du parc dans une visite d’une « usine » leur montrant comment les petites briques en plastique emblématiques sont fabriquées. »

« En utilisant la technologie Holotrack de Holovis, la Lego Factory Adventure Ride comportera un segment où les invités du parc seront transformés en l’une des figurines miniatures emblématiques de Lego. Holotrack utilise l’intelligence artificielle et les technologies d’apprentissage profond qui ont rendu possibles les vidéos « deepfake », en prenant l’image d’un individu et en la traduisant sur un écran. Les mini-figurines des invités imiteront leurs mouvements et leur apparence, en copiant leurs cheveux, lunettes, vêtements et expressions faciales. Le temps nécessaire pour rendre un invité en figurine Lego est d’environ une demi-seconde. »

Mais ce n’est certainement pas le nouveau développement d’IA dans lequel Lego est impliqué. En 2013, l’ingénierie Lego a utilisé l’intelligence artificielle pour explorer le mouvement, en utilisant des blocs de construction Lego. En 2014, les chercheurs et les programmeurs ont commencé à utiliser Lego Mindstorms EV3 robot avec l’IA en connectant le cerveau d’un ver à la partie sensorielle et motrice d’un robot EV3 à l’aide d’un programme informatique. Les passionnés de développement d’IA ont utilisé Mindstorms EV3 depuis un certain temps pour essayer de développer des mouvements robotiques.

En 2004 et 2016, deux projets de recherche ont été publiés qui ont étudié comment Lego pouvait être utilisé pour enseigner l’IA. Le premier a utilisé Lego’s Mindstorms, tandis que le second, publié par Western Washington University, a discuté de 12 ans d’expérience d’enseignement sur l’IA en utilisant des systèmes Lego, y compris EV3.

Mais la plus grande avancée de l’entreprise dans le domaine de l’IA est survenue cette année, en août, lorsqu’elle a annoncé qu’elle allait « lancer des essais d’un nouveau système pour aider les personnes ayant des déficiences visuelles à suivre les instructions Lego. »

Le système s’appelle Instructions de construction audio et en braille, et utilise « l’IA pour associer des instructions visuelles numériques traditionnelles avec des directions verbales ou tactiles en braille, et a été développé en collaboration avec un fan de Lego de toute une vie, Matthew Shifrin, qui est aveugle. »

Le système est en phase de développement précoce et prend actuellement en charge « un petit nombre d’ensembles pour le moment, tandis que l’équipe de développement recherche des commentaires auprès des utilisateurs. » Les commentaires seront utilisés pour mettre en œuvre les commentaires qui ajouteront plus d’ensembles « dans la première moitié de 2020, avec un objectif ultime de soutenir tous les lancements de produits Lego. » Les instructions officielles créées par le nouveau programme piloté par l’IA seront disponibles gratuitement sur legoaudioinstructions.com.