Pētnieku grupa izstrādā AI tehniku ​​3D sejas izteiksmes noteikšanai

Kopīga pētnieku grupa, kuru vadīja profesori Ki-Hun Jeong un Doheon Lee no Korejas progresīvā zinātnes un tehnoloģijas institūta (KAIST), ir izstrādājuši jaunu paņēmienu sejas izteiksmes noteikšanai, apvienojot infrasarkanās gaismas lauka kameru metodes ar mākslīgo intelektu (AI). ).

Pētījums tika publicēts Uzlabotas viedās sistēmas.

Gaismas lauka kameras

Gaismas lauka kamerās ir mikroobjektīvu bloki attēla sensora priekšā, un tas ļauj tām iekļauties viedtālrunī. Tajā pašā laikā viņi joprojām var iegūt gaismas telpisko un virziena informāciju ar vienu šāvienu. 

Šo attēlveidošanas paņēmienu izmanto, lai rekonstruētu attēlus dažādos veidos, piemēram, vairākos skatījumos, pārfokusēšanā un 3D attēlu iegūšanai. 

Ņemot to vērā, tehnikai ir daži ierobežojumi. Esošās gaismas lauka kameras ir cīnījušās, lai nodrošinātu precīzu attēla kontrastu un 3D rekonstrukciju dažkārt ārējo gaismas avotu radīto ēnu dēļ. 

Pētnieku komanda spēja stabilizēt 3D attēla rekonstrukcijas precizitāti, kas bija atkarīga no vides gaismas, un tehnika ļāva pārvarēt esošo gaismas lauka kameru ierobežojumus. Viņi izstrādāja jaunu kameru, kas bija optimizēta sejas izteiksmju 3D attēla rekonstrukcijai, un izmantoja to, lai iegūtu augstas kvalitātes 3D rekonstrukcijas attēlus dažādu emociju sejas izteiksmēm. Viņi to varētu sasniegt neatkarīgi no vides apgaismojuma apstākļiem.

Mašīnmācība, lai atšķirtu izteiksmes

Pēc tam komanda izmantoja mašīnmācīšanos, lai atšķirtu sejas izteiksmes iegūtajos 3D attēlos, kas sasniedza 85% precizitāti. Viņi arī aprēķināja attāluma informācijas savstarpējo atkarību, kas mainās atkarībā no sejas izteiksmes 3D attēlos, lai identificētu informāciju, ko gaismas lauka kamera izmanto, lai atšķirtu cilvēka izteiksmes. 

"Pētnieku grupas izstrādātajai subminiatūrai gaismas lauka kamerai ir potenciāls kļūt par jaunu platformu, lai kvantitatīvi analizētu cilvēku sejas izteiksmes un emocijas," sacīja profesors Ki-Huns Džeongs. 

Šim pētījumam varētu būt liela ietekme uz plašu nozaru loku. 

 "To varētu izmantot dažādās jomās, tostarp mobilajā veselības aprūpē, lauka diagnostikā, sociālajā izziņā un cilvēka un mašīnas mijiedarbībā," viņš teica.