Utilizzo delle mani come indicatori biometrici in criminalistica video forense

I ricercatori nel Regno Unito hanno sviluppato un sistema biometrico di apprendimento automatico in grado di identificare gli individui dalla forma delle loro mani. L’intento del lavoro è quello di aiutare nell’identificazione degli autori di reati, in particolare nei casi di autori di reati sessuali che hanno registrato i loro crimini, dove le informazioni sulle mani sono spesso l’unico segnale biometrico disponibile.

Il documento, intitolato Identificazione delle persone basata sulle mani utilizzando la rappresentazione delle caratteristiche globali e locali profonde, propone un nuovo framework di apprendimento automatico chiamato Global and Part-Aware Network (GPA-Net).

In GPA-Net, due tensori 3D distinti (globali e locali) vengono ottenuti passando l’immagine sorgente attraverso strati convoluzionali impilati sulla rete backbone ResNet50. Ogni una delle vie analitiche effettuerà una previsione di identità. Fonte: https://arxiv.org/pdf/2101.05260.pdf

GPA-Net crea rami locali e globali nello strato convoluzionale, al fine di creare sistemi di riconoscimento distinti per l’intera mano (con mani sinistra e destra riconosciute distintamente, a differenza di alcuni precedenti tentativi in questo settore) e le parti della mano, che possono agire come indicatori di identificazione della mano intera.

La ricerca proviene dalla School of Computing and Communications dell’Università di Lancaster e è guidata da Nathanael L. Baisa, ora professore assistente all’Università De Montfort di Leicester.

Le mani come indicatori biometrici coerenti

I ricercatori osservano che le mani offrono una raccolta coerente di caratteristiche biometriche distinte che possono essere meno soggette all’età, ai tentativi di mascheramento o ad altri fattori distorti (come la variazione delle espressioni, nel caso della cattura facciale) che possono influenzare l’affidabilità di sistemi di indicazione più popolari, tra cui il riconoscimento della camminata e il riconoscimento facciale.

Sebbene i sistemi di sicurezza abbiano sviluppato sistemi che utilizzano i modelli di vena della mano attraverso l’imaging a infrarossi, questo non è probabile che diventi disponibile nei tipi di dispositivi di registrazione utilizzati nei crimini. Piuttosto, la ricerca attuale si concentra sulle catture ottenute attraverso fotocamere digitali standard, solitamente incorporate in dispositivi mobili, ma nel caso di crimini sessuali, spesso più probabile che vengano ottenute da “fotocamere stupide” che sono meno inclini a condividere informazioni di rete.

Ironia della sorte, l’impronta palmare, forse il metodo biometrico più popolare presente nei film di fantascienza degli ultimi cinquant’anni, non ha avuto il successo atteso dai futuristi, forse perché i sistemi di riconoscimento delle impronte digitali richiedono superfici di riconoscimento più piccole e più economiche. Tuttavia, Fujitsu ha prodotto uno studio promozionale nel 2016 che sostiene che il riconoscimento del modello di vena della mano è uno strumento biometrico superiore per i sistemi di sicurezza.

Set di dati e testing

GPA-Net è, secondo i ricercatori, il primo sistema addestrato end-to-end per tentare il riconoscimento della mano. La spina dorsale centrale della sua rete è basata su ResNet50 addestrata su ImageNet. Questi sono stati scelti per la loro capacità di funzionare bene su una varietà di piattaforme, tra cui Google Inception (un modulo GoogleNet che è evoluto in una rete neurale convoluzionale in evoluzione specializzata nella rilevazione di oggetti e nell’analisi di immagini).

Il framework GPA-Net è stato testato su due set di dati: il set di dati 11k Hands del 2016, una collaborazione tra ricercatori del Canada e dell’Egitto; e il set di dati Hand Dorsal (HD) dell’Università Politecnica di Hong Kong.

Un dettaglio da ‘Identificazione personale utilizzando modelli di nocche minori dalla superficie dorsale della mano’, concentrandosi sull’identificazione delle nocche.

Il set di dati 11k presenta 190 soggetti di identità, tra cui una varietà di metadati relativi a ID, età, colore della pelle, sesso e altri fattori. I ricercatori hanno escluso qualsiasi immagine che contenesse gioielli, poiché questi sarebbero inevitabilmente diventati outlier disruptivi. Hanno anche escluso immagini dal set di dati HD che mancavano di chiarezza adeguata, poiché l’abbinamento dell’ID è un settore più sensibile della sintesi di immagini, e i dati oscurati rappresentano un pericolo maggiore.

GPA-Net è stato eseguito su un framework di apprendimento profondo PyTorch su una sola GPU NVIDIA GeForce RTX 2080 Ti con 11gb di VRAM. Il modello è stato addestrato utilizzando cross-entropy loss e un ottimizzatore Stochastic Gradient Descent (SGD) mini-batch. L’addestramento è avvenuto su 60 epoche con un tasso di apprendimento iniziale di 0,02, gestito successivamente da un programma di pianificazione del tasso di apprendimento con un fattore di decadimento di 0,1 per ogni 30 epoche – effettivamente rallentando l’addestramento mentre le caratteristiche ad alta dimensionalità vengono rapidamente incorporate, e il sistema deve successivamente spendere più tempo per attraversare i dati per ottenere dettagli più granulari.

La valutazione è stata eseguita utilizzando la metrica Cumulative Matching Characteristics (CMC) con Mean Average Precision (mAP).

I ricercatori hanno scoperto che GPA-Net supera i metodi concorrenti su ResNet50 del 24,74% in precisione di classificazione e del 37,82% in mAP.

Risultati qualitativi del test del sistema GPA-Net. Le righe dall’alto verso il basso sono le riconoscimenti dorsali destri del set 11k, dorsali sinistri dello stesso, palmari destri dello stesso e palmari sinistri dei set di dati 11k e HD. Le caselle di delimitazione verdi e rosse indicano abbinamenti corretti e scorretti.

I ricercatori ritengono che il metodo abbia ‘un forte potenziale per un’identificazione robusta degli autori di gravi reati’.