| Revista: | Journal of applied research and technology |
| Base de datos: | PERIÓDICA |
| Número de sistema: | 000399588 |
| ISSN: | 1665-6423 |
| Autors: | Villa Angulo, R1 Hidalgo Silva, H2 |
| Institucions: | 1Universidad Autónoma de Baja California, Instituto de Ingeniería, Mexicali, Baja California. México 2Centro de Investigación Científica y de Educación Superior de Ensenada, Departamento de Ciencias de la Computación, Ensenada, Baja California. México |
| Any: | 2005 |
| Període: | Dic |
| Volum: | 3 |
| Número: | 3 |
| Paginació: | 169-186 |
| País: | México |
| Idioma: | Inglés |
| Tipo de documento: | Artículo |
| Enfoque: | Aplicado, descriptivo |
| Resumen en español | En este documento se presenta el trabajo de diseño e implementación de una herramienta de comunicación para personas discapacitadas del habla y del oído. Esta herramienta es conceptualizada como una interfaz humano-computadora capaz de capturar y reconocer ademanes del lenguaje español signado de México. Para realizar la captura de las expresiones manuales, el sistema utiliza un guante de datos basado en sensores de flexión capaces de medir la posición de quince articulaciones de una de las manos de un usuario, y un sistema basado en sensores de ultrasonido para detectar la posición y movimientos de la mano con respecto al cuerpo del usuario. Un par de autómatas programables realiza el tratamiento de la información proveniente del guante de datos y del rastreador de movimientos y una computadora personal realiza el trabajo de reconocimiento e interpretación de los ademanes. Para realizar el procesamiento de la información se utilizan técnicas de redes neuronales artificiales con las cuales se realizan mapeos del espacio de información generado por los instrumentos a un espacio de soluciones donde se encuentran los significados de los ademanes representados por el usuario. Una vez capturado e interpretado un ademán, éste es presentado en forma escrita a través de una pantalla montada en la ropa del usuario, y en forma sonora a través de una bocina la cual pronuncia la letra que ha sido representada |
| Resumen en inglés | This paper describes a work related to the design and implementation of a communication tool for persons with speech and hearing disabilities. This tool provides to the user a Human-Computer interface capable of the capture and recognition of gestures belonging to the Mexican Spanish Sign Alphabet. To capture the manual expressions, a data-glove constructed to sense the position of fifteen articulations of one of the user's hand is described. A location system that detects the position and movements of the hand with respect to the user's body is also constructed. The data-glove and location system signals are processed by a pair of programmable automatons. The automaton's outputs are sent to a personal computer that realizes the gesture recognition and interpretation tasks. Artificial neural network techniques are utilized to implement the mappings of the space of information generated by the instruments to the interpretation space, where the representation of the gestures are found. Once a gesture is captured and interpreted, it is presented in written form through a screen mounted in the clothes of the user, and in verbal form by a speaker |
| Disciplines | Ciencias de la computación, Medicina |
| Paraules clau: | Redes, Otorrinolaringología, Ingeniería biomédica, Sordomudos, Hombre-computadora, Redes neuronales, Lenguaje de señas |
| Keyword: | Computer science, Medicine, Networks, Otolaryngology, Biomedical engineering, Deaf-mute, Man-computer, Neural networks, Sign language |
| Text complet: | Texto completo (Ver HTML) |
