Nyt udviklet kamera kan se rundt om hjørner ved hjælp af lys

David Lindell, en studerende i elektroteknik på Stanford University, sammen med hans team, har udviklet et kamera, der kan se flyttende objekter rundt om hjørner. Da de testede den nye teknologi, havde Lindell en højtydende træningsdragt på, da han bevægede sig rundt i et tomt rum. De havde et kamera, der var rettet mod en blank væg væk fra Lindell, og teamet kunne se alle hans bevægelser ved hjælp af en højtydende laser. Laseren genskabte billeder ved hjælp af enkeltte partikler af lys, der blev reflekteret på væggene rundt om Lindell. Det nyt udviklede kamera brugte avancerede sensorer og en procesalgoritme.

Gordon Wetzstein, adjunkt i elektroteknik på Stanford, talte om den nyt udviklede teknologi.

“Mennesker taler om at bygge et kamera, der kan se lige så godt som mennesker til formål som autonome katte og robotter, men vi vil bygge systemer, der går langt ud over det,” sagde han. “Vi vil se ting i 3D, rundt om hjørner og ud over det synlige lys-spektrum.”

Kamera-systemet, der blev testet, vil blive præsenteret på SIGGRAPH 2019-konferencen den 1. august.

Teamet har allerede udviklet lignende kameraer, der kan se rundt om hjørner tidligere, men denne kan fange mere lys fra flere overflader. Den kan også se bredere og længere samt overvåge bevægelser, der er uden for synsvidde. De håber, at disse “superhumane visions-systemer” vil kunne bruges i autonome biler og robotter, så de kan operere mere sikkert end når de styres af et menneske.

En af teamets hovedmål er at holde systemet praktisk. De bruger hardware, scanning og billedbehandlingshastigheder samt billedbehandlingsteknikker, der allerede bruges i autonome bil-visionssystemer. En forskel er, at det nye system kan fange lys, der bouncer af en række forskellige overflader med forskellige teksturer. Før kunne systemerne, der blev brugt til at se ting uden for kameraets synsvidde, kun gøre det med objekter, der reflekterede jævnt og stærkt lys.

En af udviklingerne, der hjalp dem med at skabe denne teknologi, var en laser, der er 10.000 gange mere kraftfuld end den, de brugte sidste år. Den scanner en væg på den modsatte side af interessepunktet. Lyset bouncer af væggen, rammer objekterne i scenen og returnerer tilbage til væggen og kamera-sensorerne. Sensoren kan derefter fange små partikler af laserlyset og sender dem til en algoritme, der også blev udviklet af teamet. Algoritmen afkoder partiklerne for at genskabe billederne.

“Når du ser laser-scanning, ser du ikke noget,” sagde Lindell. “Med denne hardware kan vi næsten slowe ned tiden og afsløre disse lys-spore. Det ser næsten ud som magi.”

Det nye system kan scannere med fire billeder i sekundet og genskabe scener op til 60 billeder i sekundet med en computergrafik-behandlingsenhed, der forbedrer kapaciteten.

Teamet har draget inspiration fra andre fagområder som seismiske billedsystemer. Disse bouncer lydbølger af underjordiske lag af jorden og kan se, hvad der er under overfladen. Algoritmen er konfigureret til at afkode lys, der bouncer af skjulte objekter.

Matthew O’Toole, adjunkt på Carnegie Mellon University og tidligere postdoc-forsker i Wetzsteins laboratorium, talte om den nye teknologi.

“Der er mange ideer, der bruges i andre områder – seismologi, billedbehandling med satellitter, syntetisk apertur-radar – der er anvendelige til at se rundt om hjørner,” sagde han. “Vi prøver at tage lidt fra disse fagområder, og vi håber at kunne give noget tilbage til dem på et tidspunkt.”

Teamets næste skridt er at teste systemet på autonome forskningsbiler. De vil også se, om det vil være anvendeligt i andre områder som medicinsk billedbehandling og til at bekæmpe problemer med visuelle betingelser, som chauffører støder på, såsom tåge, regn, sandstorme og sne.