Desarrollo de un sistema de interpretación de lengua de señas ecuatoriana basado en Inteligencia Artificial para mejorar la comunicación de personas sordas en Ecuador

Objetivo General: Desarrollar un sistema de interpretación del lenguaje de señas ecuatoriano por medio del uso de herramientas de inteligencia artificial basadas en aprendizaje por transferencia y aprendizaje profundo con el fin de mejorar la comunicación e interacción de personas sordas dentro del contexto ecuatoriano.

Objetivos Específicos:

  • Recolectar y anotar un data set de LSEc mediante la planificación y coordinación de sesiones de grabación de videos con hablantes de LSEc, la anotación de videos recolectados siguiendo un protocolo y la realización de controles de calidad sobre los datos, de esta manera se puede obtener un data set apto para entrenar y evaluar modelos de aprendizaje por transferencia.
  • Desarrollar un modelo de IA para la interpretación del LSEc utilizando imágenes estáticas y en movimiento del LSEc, las cuales, junto con modelo pre entrenados de clasificación de la lengua de señas permitirá la interacción entre hablantes de la LSEc y el lenguaje hablado español.
  • Validar el modelo de IA para la interpretación de LSEc a español con usuarios reales, mediante pruebas estructuradas que permitan medir tanto la precisión del sistema como el nivel de satisfacción del usuario.

Instituciones Participantes:

UTI, EPN, PUCE, UPS

Director del proyecto Andrès Rubio Proaño

Participantes:

  • Christian Raúl Salamea Palacios
  • Xavier Alexander Calderón Hinojosa
  • Andres Xavier Rubio Proaño
  • Marcelo Javier Sotaminga Cinilín
  • Juan Pablo Zaldumbide Proaño
  • Jorge Luis Banet Ponce
  • Janine Marie Matts

Presupuesto adjudicado: $39,810.16

Estado del proyecto: Adjudicado