Ingenieros de la Escuela de Ingeniería y Ciencias Aplicadas John A. Paulson de la Universidad de Harvard han creado Mobilio, una aplicación para teléfonos inteligentes que combina aprendizaje automático, sensores del propio dispositivo (cámara, GPS, unidad de medición inercial y, cuando está disponible, LiDAR) y pistas de audio personalizadas para asistir a personas con ceguera o baja visión. La herramienta ofrece indicaciones giro a giro, guía continua por aceras y detección de obstáculos, tres capacidades que los usuarios identificaron como esenciales tras una encuesta a más de 100 personas con discapacidad visual.
Mobilio incorpora un modelo de visión por computadora entrenado con imágenes desde la perspectiva del peatón, no del conductor, para reconocer aceras, cruces y superficies transitables. Además de avisos hablados, emite pitidos espaciales cuya dirección y tono se ajustan en tiempo real a cómo responde cada usuario, mediante optimización con humano en el bucle. El sistema funciona enteramente en el teléfono.
En pruebas con 14 voluntarios del Carroll Center for the Blind de Newton (Massachusetts), Mobilio combinado con un bastón blanco completó un recorrido exterior un 13% más rápido y redujo un 41% los contactos con obstáculos en un circuito interior, en comparación con Google Maps más bastón. La fiabilidad fue comparable a la de un guía humano.
El trabajo, dirigido por el estudiante de doctorado Raymond Liu con el profesor asistente Patrick Slade, se publica en Nature Biomedical Engineering. El equipo probará el sistema en entornos reales del área de Boston, con apoyo de la Harvard Grid Accelerator para facilitar su futura comercialización.