Seeing AI — Asistente Visual con IA en Tiempo Real de Microsoft para Personas Ciegas o con Baja Visión

Seeing AI es una aplicación gratuita para iOS de Microsoft Research y Microsoft Garage, surgida de un hackathon interno de 2015 que superó a más de 13 000 propuestas, lanzada de forma general el 12 de julio de 2017.

La aplicación tiene como objetivo convertir la cámara del teléfono en un asistente hablado para usuarios ciegos y con baja visión, narrando en tiempo real texto, moneda, personas, códigos de barras y escenas.

Combina visión artificial en el dispositivo y en la nube para leer texto en voz alta con orientación de alineación, identificar moneda y códigos de barras, reconocer contactos guardados, describir expresiones faciales y generar descripciones habladas de escenas.

A finales de 2017, Microsoft informó de más de 3 millones de tareas completadas y disponibilidad en más de 35 países; la aplicación ganó el Premio Helen Keller Achievement de la American Foundation for the Blind en 2018. Actualmente admite 19 idiomas y tiene una puntuación de 4,3/5 en la Apple App Store; la investigación subyacente de Microsoft sobre clasificación de imágenes registró una tasa de error top-5 del 3,57%.

Las cifras de 3 millones de tareas y 35 países son estadísticas de uso autodeclaradas por la propia Microsoft, y no cifras auditadas de forma independiente, y los datos de precisión describen puntos de referencia generales de investigación, no un estudio controlado del éxito real de las tareas para usuarios ciegos.