Système de caméra qui imite l’œil humain pour une vision robotique améliorée

Les informaticiens de l’Université du Maryland ont développé un système de caméra innovant qui pourrait révolutionner la façon dont les robots perçoivent et interagissent avec leur environnement. Cette technologie, inspirée des mouvements involontaires de l’œil humain, vise à améliorer la clarté et la stabilité de la vision robotique.

L’équipe de recherche, dirigée par l’étudiant en doctorat Botao He, a présenté ses résultats dans un article publié dans la revue Science Robotics. Leur invention, la caméra à événements améliorée par microsaccade artificielle (AMI-EV), répond à un défi crucial dans la vision robotique et les systèmes autonomes.

Le problème des caméras à événements actuelles

Les caméras à événements, une technologie relativement nouvelle dans le domaine de la robotique, excellent pour suivre les objets en mouvement par rapport aux caméras traditionnelles. Cependant, elles présentent des limitations importantes lors de la capture d’images claires et exemptes de flou dans les scénarios à haute vitesse.

Cette lacune pose un problème considérable pour les robots, les voitures autonomes et d’autres technologies qui reposent sur des informations visuelles précises et en temps opportun pour naviguer et réagir à leur environnement. La capacité de maintenir le focus sur les objets en mouvement et de capturer des données visuelles précises est cruciale pour que ces systèmes fonctionnent de manière sûre et efficace.

Inspiration de la biologie humaine

Pour relever ce défi, l’équipe de recherche s’est tournée vers la nature pour s’inspirer, en particulier de l’œil humain. Ils se sont concentrés sur les microsaccades, qui sont de minuscules mouvements oculaires involontaires qui se produisent lorsque une personne tente de se concentrer sur sa vision.

Ces mouvements minuscules mais continus permettent à l’œil humain de maintenir le focus sur un objet et de percevoir avec précision ses textures visuelles, telles que la couleur, la profondeur et l’ombrage, au fil du temps. En imitant ce processus biologique, l’équipe a visé à créer un système de caméra qui pourrait atteindre une stabilité et une clarté similaires dans la vision robotique.

UMIACS Computer Vision Laboratory

La caméra à événements améliorée par microsaccade artificielle (AMI-EV)

L’innovation principale de l’AMI-EV réside dans sa capacité à reproduire mécaniquement les microsaccades. L’équipe a intégré un prisme rotatif à l’intérieur de la caméra pour rediriger les faisceaux lumineux capturés par l’objectif. Ce mouvement rotatif continu simule les mouvements naturels de l’œil humain, permettant à la caméra de stabiliser les textures des objets enregistrés d’une manière similaire à la vision humaine.

Pour compléter l’innovation matérielle, l’équipe a développé un logiciel spécialisé pour compenser le mouvement du prisme dans l’AMI-EV. Ce logiciel consolide les modèles lumineux changeants en images stables, imitant ainsi la capacité du cerveau à traiter et à interpréter les informations visuelles provenant des micro-mouvements constants de l’œil.

Cette combinaison d’avancées matérielles et logicielles permet à l’AMI-EV de capturer des images claires et précises même dans des scénarios impliquant des mouvements importants, répondant ainsi à une limitation clé de la technologie actuelle des caméras à événements.

Applications potentielles

L’approche innovante de capture d’images de l’AMI-EV ouvre un large éventail d’applications potentielles dans divers domaines :

• Robotique et véhicules autonomes : La capacité de la caméra à capturer des images claires et stables en mouvement pourrait considérablement améliorer les capacités de perception et de prise de décision des robots et des voitures autonomes. Cette vision améliorée pourrait conduire à des systèmes autonomes plus sûrs et plus efficaces, capables de mieux identifier et de réagir à leur environnement en temps réel.
• Réalité virtuelle et augmentée : Dans le domaine des technologies immersives, la faible latence et les performances supérieures de l’AMI-EV dans les conditions d’éclairage extrêmes la rendent idéale pour les applications de réalité virtuelle et augmentée. La caméra pourrait permettre des expériences plus fluides et plus réalistes en calculant rapidement les mouvements de la tête et du corps, en réduisant ainsi les nausées de mouvement et en améliorant l’expérience utilisateur globale.
• Sécurité et surveillance : Les capacités avancées de la caméra en matière de détection de mouvement et de stabilisation d’image pourraient révolutionner les systèmes de sécurité et de surveillance. Des taux d’images plus élevés et des images plus claires dans diverses conditions d’éclairage pourraient conduire à une détection de menace plus précise et à une surveillance de sécurité améliorée.
• Astronomie et imagerie spatiale : La capacité de l’AMI-EV à capturer des mouvements rapides avec une clarté sans précédent pourrait s’avérer inestimable dans les observations astronomiques. Cette technologie pourrait aider les astronomes à capturer des images plus détaillées de corps célestes et d’événements, ce qui pourrait potentiellement conduire à de nouvelles découvertes dans l’exploration de l’espace.

Performances et avantages

L’une des caractéristiques les plus impressionnantes de l’AMI-EV est sa capacité à capturer des mouvements à des dizaines de milliers d’images par seconde. Cela dépasse de loin les capacités de la plupart des caméras commerciales disponibles, qui capturent généralement entre 30 et 1 000 images par seconde.

Les performances de l’AMI-EV ne dépassent pas seulement celles des caméras commerciales typiques en termes de taux d’images, mais également en termes de capacité à maintenir la clarté de l’image pendant les mouvements rapides. Cela pourrait conduire à des représentations plus fluides et plus réalistes du mouvement dans diverses applications.

Contrairement aux caméras traditionnelles, l’AMI-EV démontre des performances supérieures dans les scénarios d’éclairage difficiles. Cet avantage la rend particulièrement utile dans les applications où les conditions d’éclairage sont variables ou imprévisibles, telles que les véhicules autonomes en plein air ou l’imagerie spatiale.

Implications futures

Le développement de l’AMI-EV a le potentiel de transformer plusieurs industries au-delà de la robotique et des systèmes autonomes. Ses applications pourraient s’étendre à des domaines tels que les soins de santé, où elle pourrait aider à des diagnostics plus précis, ou dans la fabrication, où elle pourrait améliorer les processus de contrôle de la qualité.

À mesure que cette technologie continue de se développer, elle pourrait ouvrir la voie à des systèmes encore plus avancés et capables. Les futures itérations pourraient potentiellement intégrer des algorithmes d’apprentissage automatique pour améliorer encore davantage le traitement et la reconnaissance d’objets. De plus, la miniaturisation de la technologie pourrait conduire à son incorporation dans des appareils plus petits, élargissant ainsi ses applications potentielles encore plus loin.