Usando as Mãos como Identificador Biométrico em Forenses de Vídeo Criminais

Pesquisadores no Reino Unido desenvolveram um sistema de biometria de aprendizado de máquina capaz de identificar indivíduos pela forma de suas mãos. A intenção do trabalho é ajudar a identificar ofensores, particularmente em casos de ofensores sexuais que gravaram seus crimes, onde as informações das mãos são frequentemente o único sinal biométrico disponível.

O artigo, intitulado Identificação de Pessoas com Base em Mãos Usando Aprendizado de Recursos Globais e Conscientes de Partes, propõe um novo quadro de ML chamado Rede Global e Consciente de Partes (GPA-Net).

Na GPA-Net, dois tensores 3D distintos (global e local) são obtidos passando a imagem de origem por camadas convolucionais empilhadas na rede de backbone ResNet50. Cada uma das vias analíticas fará uma previsão de identidade. Fonte: https://arxiv.org/pdf/2101.05260.pdf

GPA-Net cria ramos locais e globais na camada convolucional, a fim de criar sistemas de reconhecimento distintos para ambas as mãos (com mãos esquerdas e direitas distintamente reconhecidas, ao contrário de algumas tentativas anteriores neste setor) e as partes da mão, que por si só podem atuar como bandeiras de alimentação para uma melhor identificação da mão inteira.

A pesquisa vem da Escola de Computação e Comunicações da Universidade de Lancaster, e é liderada por Nathanael L. Baisa, agora Professor Assistente da Universidade De Montfort, em Leicester.

Mãos como Indicadores Biométricos Consistentes

Os pesquisadores observam que as mãos oferecem uma coleção consistente de características biométricas distintas que podem ser menos sujeitas à idade, tentativas de disfarce ou outros fatores distorcidos (como variações de expressões, no caso de captura facial) que podem influenciar a confiabilidade de sistemas de indicadores mais populares, incluindo reconhecimento de passo e reconhecimento facial.

Embora os sistemas de segurança tenham sido concebidos para utilizar padrões de veias das mãos por meio de imagens infravermelhas, isso não é provável que esteja disponível nos tipos de dispositivos de gravação usados em crimes. Em vez disso, a pesquisa atual se concentra em capturas obtidas por meio de câmeras digitais padrão, geralmente incorporadas em dispositivos móveis, mas no caso de crimes sexuais, mais provavelmente obtidas por “câmeras burras” que são menos propensas a compartilhar informações de rede.

Ironicamente, a impressão digital da palma da mão, possivelmente o método biométrico mais popular apresentado em filmes de ficção científica nos últimos cinquenta anos, não teve a adoção esperada pelos futuristas, talvez porque os sistemas de identificação por impressão digital exigem superfícies de reconhecimento menores e mais baratas. No entanto, a Fujitsu produziu um estudo promocional em 2016 argumentando que o reconhecimento de padrões de veias da palma da mão é uma ferramenta biométrica superior para sistemas de segurança.

Conjuntos de Dados e Testes

GPA-Net é, de acordo com os pesquisadores, o primeiro sistema treinado de ponta a ponta para tentar reconhecimento de mãos. O backbone central de sua rede é baseado no ResNet50 treinado sobre o ImageNet. Esses foram escolhidos por sua capacidade de funcionar bem em uma variedade de plataformas, incluindo Google Inception (um módulo GoogleNet que evoluiu para uma Rede Neural Convolucional evolutiva especializada em detecção de objetos e análise de imagens).

O quadro GPA-Net foi testado em dois conjuntos de dados – o conjunto de 11k Mãos de 2016, uma colaboração entre pesquisadores do Canadá e do Egito; e o conjunto de dados Dorsal da Mão (HD) da Universidade Politécnica de Hong Kong.

Um detalhe de ‘Identificação Pessoal Usando Padrões de Knuckle Menor da Superfície Dorsal da Palma’, focando na identificação de knuckles.

O conjunto de dados de 11k apresenta 190 sujeitos de identidade, incluindo uma variedade de metadados sobre ID, idade, cor da pele, gênero e outros fatores. Os pesquisadores excluíram quaisquer imagens que contenham joias, pois essas acabariam por ser outliers disruptivos. Eles também excluíram imagens do conjunto de dados HD que não tinham clareza adequada, pois a correspondência de ID é um setor mais sensível do que a síntese de imagens, e os dados obscurecidos são um perigo maior.

GPA-Net foi executado em um quadro de aprendizado profundo PyTorch em uma única GPU NVIDIA GeForce RTX 2080 Ti com 11gb de VRAM. O modelo foi treinado usando perda de entropia cruzada, e um otimizador de Descida de Gradiente Estocástico (SGD) em mini-lotes. O treinamento ocorreu durante 60 épocas com uma taxa de aprendizado inicial de 0,02, tratada posteriormente por um agendador de taxa de aprendizado com um fator de decadência de 0,1 a cada 30 épocas – efetivamente desacelerando o treinamento à medida que os recursos de alta dimensionalidade se tornam rapidamente incorporados, e o sistema deve subsequentemente gastar mais tempo percorrendo os dados para obter detalhes mais granulares.

A avaliação foi realizada usando a métrica de Características de Combinação Cumulativa (CMC) com Precisão Média (mAP).

Os pesquisadores descobriram que GPA-Net supera os métodos concorrentes em ResNet50 por 24,74% na precisão de classificação e por 37,82% na mAP.

Resultados qualitativos do teste do sistema GPA-Net. As linhas de cima para baixo são as reconhecimentos dorsais direitos do conjunto de 11k, dorsal esquerdo do mesmo, palmar direito do mesmo, e o palmar esquerdo dos conjuntos de dados de 11k e HD. Caixas delimitadoras verdes e vermelhas indicam combinações corretas e incorretas.

Os pesquisadores consideram que o método tem ‘forte potencial para identificação robusta dos perpetradores de crimes graves’.