Inspiración

Desplazarse en la ciudad de Tijuana es complicado por la falta de señalamientos y el pobre mantenimiento de la infraestructura como banquetas. Para discapacitados es casi imposible por la escasa disponibilidad de rampas y sistemas de guia para peatones con problemas de visión. Es por eso que desarrollamos ExoNav. Con el uso de Vision por Computadora con YOLO, integrando Generación por Voz y las APIs de Maps, creamos una solución para navegar las calles la ciudad.

Decidimos utilizar herramientas como Places API y Routes API de Google Maps para la planeación de rutas. Estos servicios se encuentran implementados en Google Cloud Platform para su alta disponibilidad. Integramos Firebase Realtime para el almacenamiento de datos en Tiempo Real. Desarrollamos la aplicación móvil con el Framework de Expo por su flexbilidad con desarrollo de Multiplataforma y YOLO por su buen rendimiento en Procesamiento de Imagenes por Videocamara.

Debido al alto volumen de informacion a procesar por el sistema de Vision por Computadora no logramos llevar el procesamiento a la nube, pero esperamos usar TensorFlow para mantener un rendimiento aceptable en plataformas mobiles. Logramos asegurar accesos a los recursos en GCP con credenciales verificadas y restringir el abuso por siniestros. Esperamos encontrar un Framework que nos permite integrar con mayor facilidad la funcionalidad de TensorFlow manteniendo la compatibilidad de Expo y sin sacrificar el rendimiento de la aplicacion.

Share this project:

Updates

posted an update

The augmented reality mobility assistant for people with visual impairments will soon implement the ability to share location with authorized family members, as well as receive voice commands and interact with smart devices, becoming an indispensable tool for people with disabilities.

Log in or sign up for Devpost to join the conversation.