|
English
The main objetive of this project is to develop an Advanced Speech Communication System for Deaf. The developed system is focused on helping Deaf when they want to renew their Driver’s License. The communication system includes two translation modules:
- A Spanish into Spanish Sign Language (LSE: Lengua de Signos Española) translation module. This module is composed of a speech recognizer (for decoding the spoken utterance into a word sequence), a natural language translator (for converting a word sequence into a sequence of signs belonging to the sign language), and a 3D avatar animation module.
- A Spoken Spanish generator from sign-writing. The Spoken Spanish generator consists of an advanced visual interface where a deaf person can specify a sequence of signs in sign-writing, a language translator (for generating the sequence of words in Spanish), and finally, a TTS.
- This web includes a detailed description of the field evaluation carried out. This evaluation has been performed in the Local Traffic Office in Toledo including real government employees, and Deaf from Madrid and Toledo.
Español
El objetivo principal del proyecto que se propone en esta solicitud es el diseño, desarrollo y evaluación de una arquitectura software que permita la traducción de voz a Lengua de Signos Española (LSE) y viceversa. En esta arquitectura, las traducciones a LSE se representan mediante un agente animado en 3D. Con el fin de evaluar y probar la arquitectura planteada, se desarrollarán dos demostradores aplicados a la traducción de las frases que un funcionario público pronuncia cuando atiende personalmente a una persona sorda. Este objetivo principal se puede estructurar en varios subobjetivos que se detallan a continuación:
- Realización de un estudio lingüístico sobre las frases en castellano pronunciadas por el funcionario público y su traducción a la Lengua de Signos Española. Como resultado de este estudio se obtendrá un corpus paralelo con las frases en castellano y su traducción en LSE. Estos contenidos serán de gran importancia para realizar futuros estudios de traducción entre ambas lenguas y para desarrollar nuevas aplicaciones de aprendizaje de la LSE o de traducción en otros servicios.
- Diseño, implementación y evaluación de las diferentes tecnologías de reconocimiento de voz y de traducción entre lenguas, y su aplicación para el caso particular de traducción de castellano a LSE en servicios públicos de atención personal.
- Desarrollo de varios sistemas para la generación de propuestas de traducción que posteriormente son corregidas por los especialistas en LSE, y un entorno para el diseño y generación de las animaciones de los signos mediante un agente animado virtual.
- Generación de una base de datos de contenidos multimedia con las descripciones, características, significado y animación de los signos correspondientes a los servicios públicos de atención abordados en este proyecto.
Los dos demostradores realizados estarán orientados a los siguientes servicios públicos de atención:
- El servicio de información y gestión para la renovación del Documento Nacional de Identidad (DNI). En este caso, el sistema traducirá las informaciones y explicaciones que el funcionario público ofrece cuando atiende personalmente a una persona que quiere solicitar o renovar el DNI.
- Al igual que el servicio de información y gestión de los servicios que presta la DGT (Dirección General de Tráfico).
Los servicios finalmente considerados dependerán de las administraciones que los ofrecen de forma que nos permitan obtener la información necesaria para hacer un estudio lingüístico, y además, sea posible implantarlos en servicios reales para su evaluación.
|
