3D-Facial Expression Synthesis and its Application to Face Recognition Systems



Document title: 3D-Facial Expression Synthesis and its Application to Face Recognition Systems
Journal: Journal of applied research and technology
Database: PERIÓDICA
System number: 000365892
ISSN: 1665-6423
Authors: 1
1
Institutions: 1Centro de Investigación en Matemáticas, Guanajuato. México
Year:
Season: Dic
Volumen: 7
Number: 3
Pages: 323-339
Country: México
Language: Inglés
Document type: Artículo
Approach: Experimental, aplicado
Spanish abstract Uno de los problemas principales en los sistemas de reconocimiento de caras es el reconocer una cara con una expresión distinta a la presente en la base de datos, esto es, son dependientes de la expresión de la cara de entrada. Con el propósito de flexibilizar los sistemas de reconocimiento de caras, se propone un método nuevo y eficiente para la síntesis de expresiones faciales en 3D y su aplicación a los sistemas de reconocimiento de caras independiente de la expresión (FRS). A diferencia de los métodos actuales en la literatura, todos los pasos involucrados en la síntesis de expresión facial (eliminación de ruido, registro y síntesis de expresión) son realizados en 3D. Nuestra meta es darle mayor flexibilización a los sistemas 3D–FRS para generar múltiples expresiones a partir de una cara base neutral, la cual es modelada con una malla de elemento finito de 3 capas que representan la piel, el tejido adiposo y el cráneo. Para la realización de la síntesis de expresiones en 3D, el modelo base es complementado con los músculos mas importantes que intervienen en la generación de expresiones faciales. El modelo propuesto se puede dividir en tres pasos principales: Filtrado de Ruido, usado para eliminar los picos (prominentes) presentes en las imágenes de profundidad; Detección de Puntos de Control en la base de datos de caras en 3D, como por ejemplo, punta y grosor de la nariz, puntos en los extremos de los ojos y de la boca, etc.; Registro del modelo base con cada una de las imágenes muestra con cara neutral en la base de datos de entrenamiento, para la generación de expresiones faciales sintéticas y su posterior inclusión en la base de datos misma para incrementar el conjunto de entrenamiento (a 18 expresiones predefinidas). Expresiones adicionales pueden ser aprendidas de las imágenes de entrada o bien expresiones desconocidas pueden ser transformadas a la expresión más cercana en la
English abstract One of the main problems in Face Recognition systems is the recognition of an input face with a different expression than the available in the training database. In this work, we propose a new 3D–face expression synthesis approach for expression independent face recognition systems (FRS). Different than current schemes in the literature, all the steps involved in our approach (face denoising, registration, and expression synthesis) are performed in the 3D domain. Our final goal is to increase the flexibility of 3D–FRS by allowing them to artificially generate multiple face expressions from a neutral expression face. A generic 3D–range image is modeled by the Finite Element Method with three simplified layers representing the skin, fatty tissue and the cranium. The face muscular anatomy is superimposed to the 3D model for the synthesis of expressions. Our approach can be divided into three main steps: Denoising Algorithm, which is applied to remove long peaks present in the original 3D–face samples; Automatic Control Points Detection, to detect particular facial landmarks such as eye and mouth corners, nose tip, etc., helpful in the recognition process; Face Registration of a 3D–face model with each sample face with neutral expression in the training database in order to augment its training set (with 18 predefined expressions). Additional expressions can be learned from input faces or an unknown expression can be transformed to the closest known expression. Our results show that the 3D–face model resembles perfectly the neutral expression faces in the training database while providing a natural change of expression. Moreover, the inclusion of our expression synthesis approach in a simple 3D–FRS based on Fisherfaces increased significantly the recognition rate without requiring complex 3D–face recognition schemes
Disciplines: Ciencias de la computación
Keyword: Procesamiento de datos,
Reconocimiento de imágenes,
Expresión facial,
Eigenfaces,
Método de elementos finitos
Keyword: Computer science,
Data processing,
Image processing,
Facial expression,
Eigenfaces,
Finite elements
Full text: Texto completo (Ver HTML)