Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.

Gesture-based communication is crucial for people with hearing or speech disabilities. However, at the present time systems are often expensive or difficult to use. This project is focused on the development of a mobile application for gesture interpretation using a dense neural network. The system...

وصف كامل

محفوظ في:
التفاصيل البيبلوغرافية
المؤلف الرئيسي: Betancourt Ochoa, Josué Elian (author)
التنسيق: bachelorThesis
اللغة:spa
منشور في: 2024
الموضوعات:
الوصول للمادة أونلاين:https://dspace.unl.edu.ec/jspui/handle/123456789/31512
الوسوم: إضافة وسم
لا توجد وسوم, كن أول من يضع وسما على هذه التسجيلة!
_version_ 1857833105363042304
author Betancourt Ochoa, Josué Elian
author_facet Betancourt Ochoa, Josué Elian
author_role author
collection Repositorio Universidad Nacional de Loja
dc.contributor.none.fl_str_mv Valdiviezo Condolo, Marcelo Fernando
dc.creator.none.fl_str_mv Betancourt Ochoa, Josué Elian
dc.date.none.fl_str_mv 2024-11-21T21:11:34Z
2024-11-21T21:11:34Z
2024-11-21
dc.format.none.fl_str_mv 82 p.
application/pdf
dc.identifier.none.fl_str_mv https://dspace.unl.edu.ec/jspui/handle/123456789/31512
dc.language.none.fl_str_mv spa
dc.publisher.none.fl_str_mv Universidad Nacional de Loja
dc.rights.none.fl_str_mv http://creativecommons.org/licenses/by-nc-sa/3.0/ec/
info:eu-repo/semantics/openAccess
dc.source.none.fl_str_mv reponame:Repositorio Universidad Nacional de Loja
instname:Universidad Nacional de Loja
instacron:UNL
dc.subject.none.fl_str_mv GUANTE TRADUCTOR
TECNOLOGÍAS ASISTIDAS
MICROCONTROLADOR
LENGUAJE DE SEÑAS
APRENDIZAJE MÁQUINA
FLUTTER
dc.title.none.fl_str_mv Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
dc.type.none.fl_str_mv info:eu-repo/semantics/publishedVersion
info:eu-repo/semantics/bachelorThesis
description Gesture-based communication is crucial for people with hearing or speech disabilities. However, at the present time systems are often expensive or difficult to use. This project is focused on the development of a mobile application for gesture interpretation using a dense neural network. The system includes a circuit designed to capture the user's hand signals using flexible sensors and an MPU6050, sending the perceived information to a database in Firebase to be processed in an application programmed in Flutter. The mobile application was developed with Dart language, which has allowed the incorporation of main functionalities: visualization of gestures in letters, pronunciation of the interpreted characters and, teaching of gestures through images and videos on platforms such as YouTube. The results indicate a sixty six percent accuracy in the interpretation of global gestures of the trained model, which can be improved by modifying certain training parameters and expanding the database of each class of gestures. Key words: Translator glove; Assisted Technologies; Microcontroller; Sign language; Machine learning; Flutter
eu_rights_str_mv openAccess
format bachelorThesis
id UNL_0a6885b90152d0797b434d5bdfd87293
instacron_str UNL
institution UNL
instname_str Universidad Nacional de Loja
language spa
network_acronym_str UNL
network_name_str Repositorio Universidad Nacional de Loja
oai_identifier_str oai:dspace.unl.edu.ec:123456789/31512
publishDate 2024
publisher.none.fl_str_mv Universidad Nacional de Loja
reponame_str Repositorio Universidad Nacional de Loja
repository.mail.fl_str_mv *
repository.name.fl_str_mv Repositorio Universidad Nacional de Loja - Universidad Nacional de Loja
repository_id_str 0
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-sa/3.0/ec/
spelling Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.Betancourt Ochoa, Josué ElianGUANTE TRADUCTORTECNOLOGÍAS ASISTIDASMICROCONTROLADORLENGUAJE DE SEÑASAPRENDIZAJE MÁQUINAFLUTTERGesture-based communication is crucial for people with hearing or speech disabilities. However, at the present time systems are often expensive or difficult to use. This project is focused on the development of a mobile application for gesture interpretation using a dense neural network. The system includes a circuit designed to capture the user's hand signals using flexible sensors and an MPU6050, sending the perceived information to a database in Firebase to be processed in an application programmed in Flutter. The mobile application was developed with Dart language, which has allowed the incorporation of main functionalities: visualization of gestures in letters, pronunciation of the interpreted characters and, teaching of gestures through images and videos on platforms such as YouTube. The results indicate a sixty six percent accuracy in the interpretation of global gestures of the trained model, which can be improved by modifying certain training parameters and expanding the database of each class of gestures. Key words: Translator glove; Assisted Technologies; Microcontroller; Sign language; Machine learning; FlutterLa comunicación basada en gestos es crucial para personas con discapacidades auditivas o del habla. Sin embargo, los sistemas actuales suelen ser costosos o difíciles de usar. Este proyecto se centró en el desarrollo de una aplicación móvil para la interpretación de gestos utilizando una red neuronal densa. El sistema incluye un circuito diseñado para capturar las señales de la mano del usuario mediante sensores flexibles y un MPU6050, enviando la información percibida a una base de datos en Firebase para ser procesados en una aplicación programada en Flutter. La aplicación móvil fue desarrollada con lenguaje Dart, la cual ha permitido incorporar funcionalidades principales: visualización de gestos en letras, pronunciación de los caracteres interpretados y enseñanza de gestos a través de imágenes y videos en plataformas como YouTube. Los resultados indican una precisión del 66% en la interpretación de gestos globales del modelo entrenado, la cual puede mejorar modificando ciertos parámetros del entrenamiento y ampliando la base de datos de cada clase de gestos. Palabras clave: Guante traductor; Tecnologías Asistidas; Microcontrolador; Lenguaje de señas; Aprendizaje máquina; FlutterUniversidad Nacional de LojaValdiviezo Condolo, Marcelo Fernando2024-11-21T21:11:34Z2024-11-21T21:11:34Z2024-11-21info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/bachelorThesis82 p.application/pdfhttps://dspace.unl.edu.ec/jspui/handle/123456789/31512spahttp://creativecommons.org/licenses/by-nc-sa/3.0/ec/info:eu-repo/semantics/openAccessreponame:Repositorio Universidad Nacional de Lojainstname:Universidad Nacional de Lojainstacron:UNL2025-05-02T16:34:38Zoai:dspace.unl.edu.ec:123456789/31512Institucionalhttps://dspace.unl.edu.ec/Universidad públicahttps://unl.edu.ec/https://dspace.unl.edu.ec/oaiEcuador***opendoar:02025-05-02T16:34:38falseInstitucionalhttps://dspace.unl.edu.ec/Universidad públicahttps://unl.edu.ec/https://dspace.unl.edu.ec/oai*Ecuador***opendoar:02025-05-02T16:34:38Repositorio Universidad Nacional de Loja - Universidad Nacional de Lojafalse
spellingShingle Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
Betancourt Ochoa, Josué Elian
GUANTE TRADUCTOR
TECNOLOGÍAS ASISTIDAS
MICROCONTROLADOR
LENGUAJE DE SEÑAS
APRENDIZAJE MÁQUINA
FLUTTER
status_str publishedVersion
title Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
title_full Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
title_fullStr Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
title_full_unstemmed Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
title_short Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
title_sort Diseño e implementación de un guante traductor de señas para personas con discapacidad auditiva y/o verbal.
topic GUANTE TRADUCTOR
TECNOLOGÍAS ASISTIDAS
MICROCONTROLADOR
LENGUAJE DE SEÑAS
APRENDIZAJE MÁQUINA
FLUTTER
url https://dspace.unl.edu.ec/jspui/handle/123456789/31512