| Journal: | Dyna (Medellín) |
| Database: | |
| System number: | 000537765 |
| ISSN: | 0012-7353 |
| Authors: | Guerrero Balaguera, Juan David1 Pérez Holguín, Wilson Javier1 |
| Institutions: | 1Universidad Pedagógica y Tecnológica de Colombia, Sogamoso. Colombia |
| Year: | 2015 |
| Season: | Ene-Feb |
| Volumen: | 82 |
| Number: | 189 |
| Pages: | 172-181 |
| Country: | Colombia |
| Language: | Español |
| Spanish abstract | Este trabajo presenta el desarrollo de un sistema diseñado para facilitar la comunicación e interacción de personas con discapacidad auditiva severa con las demás personas. El sistema emplea técnicas de visión artificial para el reconocimiento de las señas estáticas de la Lengua de Señas Colombiana (LSC). El sistema tiene cuatro etapas: Captura de la imagen, preprocesamiento, extracción de características y reconocimiento. La imagen es capturada mediante una cámara digital TRDB-D5M diseñada para tarjetas de desarrollo de DE1 y DE2 Altera. En la etapa de preprocesamiento, la seña es extraída del fondo de la imagen mediante el método de segmentación por umbral; posteriormente, la imagen segmentada es filtrada usando una operación morfológica para eliminar el ruido. La etapa de extracción de características está basada en la creación de dos vectores que caracterizan la forma de la mano mediante la que se realiza la seña. La etapa de reconocimiento está constituida por una red neuronal artificial perceptrón multicapa (MLP), la cual actúa como clasificador. El sistema fue implementado en el dispositivo FPGA Cyclone II EP2C70F896C6 y no requiere el uso de guantes o marcadores visuales para su correcto funcionamiento. Los resultados muestran que el sistema tiene la capacidad para reconocer todas las 23 señas estáticas de la LSC con una taza de reconocimiento del 98.15 %. |
| English abstract | This paper presents the development of a system aimed to facilitate the communication and interaction of people with severe hearing impairment with other people. The system employs artificial vision techniques to the recognition of static signs of Colombian Sign Language (LSC). The system has four stages: Image capture, preprocessing, feature extraction and recognition. The image is captured by a digital camera TRDB-D5M for Altera's DE1 and DE2 development boards. In the preprocessing stage, the sign is extracted from the background of the image using the thresholding segmentation method; then, the segmented image is filtered using a morphological operation to remove the noise. The feature extraction stage is based on the creation of two vectors to characterize the shape of the hand used to make the sign. The recognition stage is made up a multilayer perceptron neural network (MLP), which functions as a classifier. The system was implemented in the Altera's Cyclone II FPGA EP2C70F896C6 device and does not require the use of gloves or visual markers for its proper operation. The results show that the system is able to recognize all the 23 signs of the LSC with a recognition rate of 98.15 %. |
| Keyword: | FPGA, Lengua de Señas Colombiana, Procesamiento de Imágenes, Reconocimiento de Lengua de Señas, Redes Neuronales Artificiales |
| Keyword: | FPGA, Colombian Sign Language, Image Processing, Sign Language Recognition, Artificial Neural Networks |
| Full text: | Texto completo (Ver HTML) Texto completo (Ver PDF) |
