VisApp: Aplicacion de Android con Deteccion de Objetos para la Asistencia de Personas Invidentes

Abstract

En el presente trabajo de investigación se abordó el diseño de una aplicación para la asistencia de personas invidentes basado en algoritmos de machine learning. Incluye un sistema de detección de objetos, para el que se utilizó el algoritmo YOLO v4 entrenado con 9 clases de objetos correspondientes a artículos del hogar, y provenientes del dataset Open Images v4; soporte para comandos de voz, para proporcionar una interfaz de manos libres, y guía por voz, que retroalimenta al usuario con el estado de las consultas y de los resultados obtenidos de la detección. El sistema consiste en una aplicación de Android que incorpora los motores de reconocimiento y síntesis de voz de Google y se conecta a un entorno en la nube, para ejecutar un algoritmo de consulta y mostrar los resultados través de una aplicación Web en la interfaz de la aplicación. En cuanto a resultados, se obtuvo una aplicación de Android con un algoritmo de detección de objetos que obtuvo una precisión del 60 % y un tiempo de procesa miento de 6.7 s en promedio para cada imagen.