Echipa de cercetare dezvoltă tehnica AI pentru detectarea expresiei faciale 3D

O echipă comună de cercetare condusă de profesorii Ki-Hun Jeong și Doheon Lee de la Institutul Avansat de Știință și Tehnologie din Coreea (KAIST) a dezvoltat o nouă tehnică pentru detectarea expresiei faciale prin combinarea tehnicilor camerelor cu câmp de lumină în infraroșu apropiat cu inteligența artificială (AI). ).

Cercetarea a fost publicată în Sisteme inteligente avansate.

Camere cu câmp luminos

Camerele cu câmp luminos conțin rețele de micro-lentile în fața senzorului de imagine, ceea ce le permite să se potrivească într-un telefon inteligent. În același timp, aceștia pot obține în continuare informațiile spațiale și direcționale ale luminii cu o singură lovitură. 

Această tehnică de imagistică este utilizată pentru a reconstrui imagini în multe moduri diferite, cum ar fi vizualizari multiple, refocalizare și achiziție de imagini 3D. 

Acestea fiind spuse, tehnica are unele limitări. Camerele existente cu câmp luminos s-au luptat să ofere un contrast precis al imaginii și o reconstrucție 3D uneori din cauza umbrelor cauzate de sursele de lumină externe din mediu. 

Echipa de cercetare a reușit să stabilizeze acuratețea reconstrucției imaginii 3D care depindea de lumina ambientală, iar tehnica le-a permis să depășească limitările camerelor existente cu câmp luminos. Ei au dezvoltat o nouă cameră care a fost optimizată pentru reconstrucția imaginii 3D a expresiilor faciale și au folosit-o pentru a obține imagini de reconstrucție 3D de înaltă calitate ale expresiilor faciale ale diferitelor emoții. Ei ar putea realiza acest lucru indiferent de condițiile de iluminare ale mediului.

Învățare automată pentru a distinge expresiile

Echipa a folosit apoi învățarea automată pentru a distinge expresiile faciale din imaginile 3D achiziționate, care a obținut o rată de precizie de 85%. Ei au calculat, de asemenea, interdependența informațiilor despre distanță, care variază în funcție de expresia facială în imaginile 3D, pentru a identifica informațiile pe care o cameră cu câmp luminos le folosește pentru a distinge expresiile umane. 

„Camera sub-miniaturală cu câmp de lumină dezvoltată de echipa de cercetare are potențialul de a deveni noua platformă pentru a analiza cantitativ expresiile faciale și emoțiile oamenilor”, a spus profesorul Ki-Hun Jeong. 

Această cercetare ar putea avea un impact mare asupra unei game largi de industrii. 

 „Ar putea fi aplicat în diverse domenii, inclusiv asistența medicală mobilă, diagnosticarea pe teren, cogniția socială și interacțiunile om-mașină”, a spus el.