Universidad San Jorge Escuela de Arquitectura y Tecnología Grado en Ingeniería Informática Proyecto Final Desarrollo de un sistema de reconocimiento de poses 3D en personas utilizando ML

Abstract

El objetivo principal de este proyecto es lograr la integración de un módulo de estimación de pose 3D dentro de una librería de análisis del movimiento desarrollada por el Instituto Tecnológico de Aragón (ITAINNOVA). El módulo realizará la estimación de pose de manera robusta y rápida utilizando técnicas de Aprendizaje Máquina. Para obtener una comprensión completa de la apariencia, interacción y desempeño de las personas, es crucial capturar de forma rápida y precisa la información tridimensional de su cuerpo, rostro y manos a partir de una imagen en color RGB. La identificación de pose surge de la necesidad de conseguir que los usuarios de sistemas de realidad virtual y aumentada puedan interactuar con estos de una forma más natural y se puedan identificar eventos o determinadas actividades en vídeos. Se trata de un proyecto de investigación y desarrollo con aplicaciones en el ámbito clínico y deportivo. A lo largo del documento se presenta de manera detallada el proceso de investigación realizado, así como las nuevas aportaciones al proyecto “Misiones” en ITAINNOVA. El resultado ha sido satisfactorio, se ha conseguido integrar el nuevo modelo volumétrico ExPose en el paquete Human Pose Estimation (HPE) de la librería BodyFlow, así como utilizar las métricas para comparar este modelo con los ya existentes en el Human Activity Recognition (HAR) obteniendo valiosos resultados.