Multimodal Hierarchical Face Recognition using Information from 2.5D Images

Main Article Content

João C. Monteiro
Tiago Freitas
Jaime S. Cardoso

Abstract

Facial recognition under uncontrolled acquisition environments faces major challenges that limit the deployment of real-life systems. The use of 2.5D information can be used to improve discriminative power of such systems in conditions where RGB information alone would fail. In this paper we propose a multimodal extension of a previous work, based on SIFT descriptors of RGB images, integrated with LBP information obtained from depth scans, modeled by an hierarchical framework motivated by principles of human cognition. The framework was tested on EURECOM dataset and proved that the inclusion of depth information improved significantly the results in all the tested conditions, compared to independent unimodal approaches.

Downloads

Download data is not yet available.

Article Details

Author Biographies

João C. Monteiro, INESC TEC; Universidade do Porto

INESC TEC - INESC Tecnologia e Ciência

Campus da Faculdade de Engenharia da Universidade do Porto

Rua Dr. Roberto Frias

Edifício I

4200-465 PORTO

Portugal

Programa Doutoral em Engenharia Electrotécnica e de Computadores

Faculdade de Engenharia

Universidade do Porto

Rua Dr. Roberto Frias

4200-465 PORTO

Portugal

Tiago Freitas, INESC TEC; Universidade do Porto

INESC TEC - INESC Tecnologia e Ciência

Campus da Faculdade de Engenharia da Universidade do Porto

Rua Dr. Roberto Frias

Edifício I

4200-465 PORTO

Portugal

 

Mestrado Integrado em Bioengenharia

Faculdade de Engenharia

Universidade do Porto

Rua Dr. Roberto Frias

4200-465 PORTO

Portugal

Jaime S. Cardoso, INESC TEC; Universidade do Porto

INESC TEC - INESC Tecnologia e Ciência

Campus da Faculdade de Engenharia da Universidade do Porto

Rua Dr. Roberto Frias

Edifício I

4200-465 PORTO

Portugal

 

Departamento de Engenharia Electrotécnica e de Computadores

Faculdade de Engenharia

Universidade do Porto

Rua Dr. Roberto Frias

4200-465 PORTO

Portugal