Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio...

18
Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT 13/01/2009

Transcript of Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio...

Page 1: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal

Reunión de seguimiento en ETSIT

13/01/2009

Page 2: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

TAREAS: OBJETIVO Y

PLANIFICACIÓN GENERAL

Page 3: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

OBJETIVO CONCRETO

Diseño, desarrollo y evaluación de una arquitectura software que permita la traducción de voz a Lengua de Signos Española (LSE) aplicados a la traducción de las frases que un funcionario público pronuncia cuando atiende personalmente a una persona sorda.

Dos servicios elegidos: Renovación del Documento Nacional de Identidad (DNI). Información y gestión de los servicios que presta la DGT (Dirección General de Tráfico).

Page 4: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

PLANIFICACIÓN GENERAL

Tareas T0 T1 T2 T3 T4 T5 T6 T7 T8 T9 T10 T11

T1: Estudio Lingüístico

T2: Diseño Arquitectura

T3: Reconocimiento de voz

T4: Traducción por reglas

T5: Traducción estadística

T6: Generación de signos

T7: Evaluación prototipos

T8: Gestión/documentación

Page 6: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

Se ha definido un documento de

etiquetado de glosas

Page 8: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.
Page 9: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

ADAPTACIÓN AL LOCUTOR DEL RECONOCEDOR

Reconocimiento independiente de locutor. Adaptación: sólo en caso de voces con acentos muy marcados. Mejora de tasa y velocidad muy importante. Grabación de 100 frases y regeneración de los modelos (1 hora aprox.)

Page 11: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

SEA - HAMNOSYS

No es perfecto (75%). Permitiría generar primera versión para luego modificar. Demos en web

Page 12: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.
Page 13: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

GENERACIÓN DE SIGNOS

ESCALERA.txt

Page 14: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

EVALUACIÓN DE PROTOTIPOS Definir escenarios Probar con personas sordas + cuestionarios Análisis de medidas objetivas y subjetivas

DOCUMENTACIÓN 2 personas están trabajando en la documentación de todos los programas generados Desarrollo de programas de instalación

Page 15: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

TRADUCCIÓN DE LSE A VOZ

Primera versión del interfaz Integración del CTV de Loquendo Módulo de traducción basado en reglas generadas a partir de las frases. Hecho para el caso del DNI.

Page 16: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.
Page 17: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

WEB DEL PROYECTO

Page 18: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.

LO QUE QUEDAENERO FEBRERO MARZO

GTH

Fundación CNSE

Conjuntos

Traducción DGT Signos DGT

Reglas DNI Reglas DGT

Evaluación

Documentación