Diseño y validación de un software de reconocimiento de gestos sirviéndose del acelerómetro de un reloj inteligente

Abstract

[ES] El trabajo propone un software para el microcontrolador ESP32 de un reloj inteligente, que interpreta los movimientos del brazo y los convierte en órdenes visibles en la interfaz del propio reloj. Previamente se analiza el funcionamiento de los acelerómetros y del microcontrolador, como base del hardware en el que nos apoyaremos. Así como la metodología de análisis de componentes principales y los algoritmos de reconocimiento de gestos Dynamic Time Warping (DTW), DTW with AP and CS, y Multilayer Perceptron (MLP), entre otros posibles métodos. También se analizan otros trabajos de investigación que usaron dichos algoritmos en otros dispositivos emisores diferentes a los relojes inteligentes. Y, a partir de ahí, se diseña el software específico para los relojes inteligentes, como resultado principal del trabajo. El algoritmo que se diseña es sometido, por último, a validación utilizando la metodología de matrices de confusión.

[EN] This mather thesis proposes the development of a firmware for the ESP32 microcontroller in a smart watch, which interprets the movements of the arm and converts them into visible orders on the smart watch interface. Previously, the operation of the accelerometers and the microcontroller is analyzed, as the basis of the hardware that we will use. As well as the principal component analysis methodology and the Dynamic Time Warping (DTW), DTW with AP and CS, and Multilayer Perceptron (MLP) gesture recognition algorithms, among other possible methods. Other research works that use these algorithms are also analyzed. And, from there, the specific software for smart watches is designed, as the main result of the work. Finally, the algorithm that is designed is subjected to validation using the confusion matrix methodology.