Por favor, use este identificador para citar o enlazar este ítem: http://dspace.espoch.edu.ec/handle/123456789/19914
Título : Implementación de un sistema de visión artificial sobre Willow para recrear movimientos que ayuden en el aprendizaje y estimulación motriz de niños de 3-5 años de edad.
Autor : Andrade Tello, Liseth Johanna
Vallejo Barragán, Daniel Marcelo
Director(es): Tinajero León, José Luis
Tribunal (Tesis): Lozada Yánez, Pablo Eduardo
Palabras claves : ESTIMULACIÓN MOTRIZ;TERAPIA;HUMANOIDE;ROBOT;VISIÓN ARTIFICIAL;ADQUISICIÓN DE IMAGEN;ARQUITECTURA ARM;PHYTON(SOFTWARE)
Fecha de publicación : 19-feb-2021
Editorial : Escuela Superior Politécnica de Chimborazo
Citación : Andrade Tello, Liseth Johanna; Vallejo Barragán, Daniel Marcelo. (2021). Implementación de un sistema de visión artificial sobre Willow para recrear movimientos que ayuden en el aprendizaje y estimulación motriz de niños de 3-5 años de edad. Escuela Superior Politécnica de Chimborazo. Riobamba.
Identificador : UDCTFIYE;108T0352
Abstract : The objective of the research was the implementation of an artificial vision system on Willow to recreate ovements helping in learning and motor stimulation in 3-5-year-old children. Information was collected from research carried out about motor stimulation in preschool-age children, from this information was possible to determine the therapy that was best suited to this research. During the development, the design and implementation of the prototype were carried out, which consists of two sections, the design of the structure of the humanoid Robot and the design of the artificial vision system. The algorithm was developed in Python furthermore, the OPEN CV library was used, to work the artificial vision system with the ARM architecture of the raspberry Pi4 card. The first step for the development of the algorithm is the acquisition and filtering of the image in real-time. Once the respective libraries have been loaded and all camera parameters have been calibrated, the segmentation and image processing are carried out. In this stage, the TensorFlow neural network was used, in the case of Willow_VA, the algorithm was programmed to detect the upper middle part of the body. Once the data package of the system is obtained, they are sent through serial communication to the Robot's microcontroller so that the movements can be executed. Through the validation tests carried out, it was possible to conclude that the prototype was well received by the teachers and children, as well as the prototype had an average efficiency of 90-100 in terms of percentage. It is recommended for future research to work with a paid deep learning code framework due to TensorFlow lite has certain compilation problems for communication and execution with higher complexity routines.
Resumen : El objetivo de la investigación fue la implementación de un sistema de visión artificial sobre Willow para recrear movimientos que ayuden en el aprendizaje y estimulación motriz de niños de 3 a 5 años de edad. Se recopiló información de investigaciones realizadas acerca de estimulación motriz en niños en edad pre escolar, a partir de la cual se pudo determinar la terapia que más se adecuó a nuestro trabajo. Durante el desarrollo se realizó el diseño e implementación del prototipo el cual consta de 2 secciones, diseño de la estructura del Robot humanoide y el diseño del sistema de visión artificial. El algoritmo se desarrolló en Python además se utilizó la librería de OPEN CV, para el sistema de visión artificial trabaja con la arquitectura ARM de la tarjeta raspberry Pi4. El primer paso para el desarrollo del algoritmo es la adquisición y filtrado de imagen en tiempo real, una vez cargadas las librerías respectivas y calibrados todos parámetros de la cámara se pasa a la segmentación y procesamiento de imagen. En esta etapa se utilizó la red neuronal TensorFlow, para el caso de Willow_VA el algoritmo se programó para la detección de la parte media superior del cuerpo. Una vez obtenido el paquete de datos del sistema este se envía por medio de comunicación serial al microcontrolador del Robot para que se ejecute los movimientos. Por medio de las pruebas de validación realizadas se pudo concluir que el prototipo tuvo una gran acogida por parte de los docente y niños, así también, que el prototipo obtuvo un promedio de eficiencia del entre 90% y 100%. Se recomienda para investigaciones futuras trabajar con un framework de código de aprendizaje profundo de paga ya que Tensorflow lite tiene ciertos problemas de compilación para la comunicación y ejecución de rutinas más complejas.
URI : http://dspace.espoch.edu.ec/handle/123456789/19914
Aparece en las colecciones: Ingeniero en Electrónica, Control y Redes Industriales; Ingeniero/a en Electrónica y Automatización

Ficheros en este ítem:
Fichero Descripción Tamaño Formato  
108T0352.pdf1,84 MBAdobe PDFVista previa
Visualizar/Abrir


Este ítem está sujeto a una licencia Creative Commons Licencia Creative Commons Creative Commons