Kamera-system ligner det menneskelige øje for forbedret robotisk syn

Computerforskere fra University of Maryland har udviklet et innovativt kamera-system, der kan revolutionere, hvordan robotter opfatter og interagerer med deres omgivelser. Denne teknologi, der er inspireret af det menneskelige øjes ufrivillige bevægelser, sigter mod at forbedre klarheden og stabiliteten af robotterne syn.

Forskningsholdet, ledet af ph.d.-studerende Botao He, har offentliggjort deres resultater i en artikel i tidsskriftet Science Robotics. Deres opfindelse, den kunstige mikrosakade-forbedrede begivenheds-kamera (AMI-EV), løser en kritisk udfordring i robot-syn og autonome systemer.

Problemet med nuværende begivenheds-kameraer

Begivenheds-kameraer, en relativt ny teknologi inden for robotter, er bedre til at spore bevægelser end traditionelle kameraer. Men de har dog betydelige begrænsninger, når det kommer til at fange klare, blur-frie billeder i høj-motions-scenarier.

Dette problem er en stor udfordring for robotter, selv-kørende biler og andre teknologier, der afhænger af præcis og rettidig visuel information for at navigere og reagere på deres omgivelser. Evnen til at fastholde fokus på bevægelser og fange præcis visuel data er afgørende for, at disse systemer kan fungere sikkert og effektivt.

Inspiration fra menneskebiologi

For at løse denne udfordring vendte forskningsholdet sig til naturen for inspiration, specifikt det menneskelige øje. De fokuserede på mikrosakader, der er små, ufrivillige øjebewægelser, der sker, når en person forsøger at fokusere deres syn.

Disse minuscule, men kontinuerlige bevægelser giver det menneskelige øje mulighed for at fastholde fokus på et objekt og nøjagtigt opfatte dets visuelle teksturer, såsom farve, dybde og skygge, over tid. Ved at efterligne denne biologiske proces sigtede holdet på at skabe et kamera-system, der kunne opnå lignende stabilitet og klarhed i robot-syn.

UMIACS Computer Vision Laboratory

Den kunstige mikrosakade-forbedrede begivenheds-kamera (AMI-EV)

AMI-EV’s kerne-innovation ligger i dens evne til at replikere mikrosakader mekanisk. Holdet indarbejdede en roterende prisme inde i kameraet for at omdirigere lysstråler fanget af linserne. Denne kontinuerlige rotationsbevægelse simulerer de naturlige bevægelser af det menneskelige øje, hvilket giver kameraet mulighed for at stabilisere teksturerne af optagede objekter på en måde, der ligner menneskeligt syn.

Til at supplere denne hardware-innovation udviklede holdet specialiseret software til at kompensere for prismens bevægelse inden for AMI-EV. Denne software konsoliderer de skiftende lysmønstre til stabile billeder, hvilket effektivt efterligner hjernens evne til at behandle og fortolke visuel information fra øjets konstante mikro-bevægelser.

Denne kombination af hardware- og software-fremgang giver AMI-EV mulighed for at fange klare, nøjagtige billeder, selv i scenarier med betydelig bevægelse, og løser dermed en nøgle-udfordring i nuværende begivenheds-kamerateknologi.

Potentiale anvendelser

AMI-EV’s innovative tilgang til billedoptagelse åbner op for en bred vifte af potentiale anvendelser på tværs af forskellige felter:

• Robotik og selv-kørende køretøjer: Kameraets evne til at fange klare, bevægelses-stabile billeder kunne betydeligt forbedre perceptionen og beslutningstagningen hos robotter og selv-kørende biler. Dette forbedrede syn kunne føre til sikrere og mere effektive autonome systemer, der er i stand til bedre at identificere og reagere på deres omgivelser i realtid.
• Virtual og forstærket virkelighed: I området for immersiv teknologi giver AMI-EV’s lave forsinkelse og overlegne præstation i ekstreme lysforhold den ideelle kamera til virtual og forstærket virkelighedsanvendelser. Kameraet kunne muliggøre mere sammenhængende og realistiske oplevelser ved at hurtigt beregne hoved- og kropsbevægelser, reducere motionsyge og forbedre den samlede brugeroplevelse.
• Sikkerhed og overvågning: Kameraets avancerede funktioner i bevægelsesdetektion og billedstabilisering kunne revolutionere sikkerheds- og overvågnings-systemer. Højere billedhastigheder og klare billeder under forskellige lysforhold kunne føre til mere præcis trusler-detection og forbedret overvågning.
• Astronomi og rum-billeder: AMI-EV’s evne til at fange hurtig bevægelse med usædvanlig klarhed kunne være uvurderlig i astronomiske observationer. Denne teknologi kunne hjælpe astronomer med at fange mere detaljerede billeder af himmellegemer og begivenheder, hvilket potentielt kunne føre til nye opdagelser i rum-eksploration.

Præstation og fordele

En af de mest imponerende funktioner ved AMI-EV er dens evne til at fange bevægelse i titusinder af billeder per sekund. Dette overgår langt mulighederne for de fleste kommercielt tilgængelige kameraer, der typisk fanger mellem 30 og 1.000 billeder per sekund.

AMI-EV’s præstation overgår ikke kun de typiske kommercielle kameraers billedhastighed, men også dens evne til at fastholde billedklarhed under hurtig bevægelse. Dette kunne føre til mere sammenhængende og realistiske afbildninger af bevægelse i forskellige anvendelser.

I modsætning til traditionelle kameraer viser AMI-EV overlegen præstation i udfordrende lys-scenarier. Denne fordel gør den særligt nyttig i anvendelser, hvor lysforholdene er variable eller uforudsigelige, såsom i selv-kørende køretøjer eller rum-billeder.

Fremtidige implikationer

Udviklingen af AMI-EV har potentialet til at transformere flere brancher ud over robotik og autonome systemer. Dens anvendelser kunne strække sig til områder som sundhedspleje, hvor den kunne hjælpe med mere præcise diagnoser, eller i produktion, hvor den kunne forbedre kvalitetskontrol-processer.

Da denne teknologi fortsætter med at udvikle sig, kan den muligvis åbne vejen for endnu mere avancerede og kapable systemer. Fremtidige iterationer kunne potentielt integrere maskinlæringsalgoritmer for at yderligere forbedre billedbehandling og genkendelsesfunktioner. Derudover kunne miniaturisering af teknologien føre til, at den kan indarbejdes i mindre enheder, hvilket udvider dens potentiale anvendelser endnu videre.