Ayuda a la movilidad de personas invidentes basado en visión artificial

Abstract

This research is based on the use of computer vision using an application developed in C++ with CImg and OpenCV image treatment libraries, apart from Tesseract OCR engine for character recognition in images. Starting from a mobility problem, we will try to solve it using the tools that we learned during the degree, which will be useful in the development of the application. Several shape recognition techniques to identify the doors of the wagons were proposed, for example, the detection of the corners or the black margins of the doors. When analyzing the images taken from the different types of wagons in the lines of Metrovalencia, we arrived at the conclusion that there are many different door shapes according to the shape of the door windows. However, we can always find a sign, which is always the same, above every door. This way, the application is based on localizing the sign and then, detect if the door is open or closed by means of shape recognition.

Esta investigacio¿n se basa en el uso de la visio¿n artificial mediante una aplicacio¿n desarrollada en C++ con las libreri¿as para tratamiento de imagen CImg y OpenCV, adema¿s del motor Tesseract OCR para el reconocimiento de caracteres en una imagen. Partimos de un problema de movilidad, el cual se intenta solucionar utilizando las herramientas aprendidas durante el Grado, que nos sera¿n de utilidad para desarrollar la aplicacio¿n. Se plantearon varias te¿cnicas de reconocimiento de formas para identificar las puertas de metro, como, por ejemplo, la deteccio¿n de las esquinas o de los ma¿rgenes negros de las puertas. Tras analizar las ima¿genes tomadas de los diferentes tipos de metros de las li¿neas de metro de Valencia, se llego¿ a la conclusio¿n de que las formas de las puertas variaban dependiendo en la forma de los cristales de las puertas. Sin embargo, siempre se encuentra el mismo letrero encima de cada puerta. De esta manera, la aplicacio¿n se basa en localizar el letrero y despue¿s, detectar si la puerta esta¿ abierta o cerrada mediante el reconocimiento de formas.