Visionauta es una aplicación de accesibilidad que emplea inteligencia artificial para dar más autonomía a las personas ciegas y con baja visión, creada por Jonathan Santos, ingeniero de software ciego que trabajó en Google y Samsung incorpora un asistente que ve: habla por voz sin interrupciones, describe entornos, le dice a la persona dónde se encuentra, busca información en internet, lee y reproduce partituras impresas y ayuda a las personas ciegas a encuadrar bien sus fotos. Disponible para iPhone y Android. A todas las funciones gratuitas se puede acceder dentro de cupos diarios y la suscripción opcional Visionauta Plus.

La aplicación anuncia su mayor actualización hasta la fecha, y ya habla once idiomas: portugués, inglés, español, francés, coreano, alemán, japonés, italiano, árabe, ruso y chino simplificado. La traducción abarca toda la aplicación y también las respuestas de la inteligencia artificial, que conversa con cada persona en su propio idioma.

«Traducir la aplicación al árabe, al ruso, al chino, al japonés, al alemán y al italiano no fue una decisión de mercado, sino una cuestión de justicia. La tecnología de apoyo siempre llegó primero en inglés, y quien no habla inglés esperaba años. Esta vez no.» — Jonathan Santos

Todas las funciones de la aplicación pueden usarse sin pagar, dentro de cupos diarios. La suscripción opcional Visionauta Plus amplía esos cupos. La aplicación está disponible para iPhone en la App Store y para Android en Google Play.

CONVERSACIÓN EN TIEMPO REAL: UN ASISTENTE QUE VE Y RESPONDE

La función central de Visionauta es la Conversación en Tiempo Real. La persona habla con naturalidad —sin pulsar ningún botón, sin esperar una señal sonora— con una inteligencia artificial que ve a través de la cámara del teléfono y responde de inmediato por voz. Como un amigo vidente que está a tu lado y describe el mundo.

«La Conversación en Tiempo Real cambió lo que es Visionauta. Ya no es una aplicación en la que haces una foto y esperas una respuesta: es una conversación continua con alguien que ve por ti y siempre está ahí, ya sea para describir la calle, encontrar la farmacia más cercana o leerte la partitura que estás a punto de tocar.» — Jonathan Santos

Durante esa conversación, Visionauta puede:

• Describir entornos y escenas: qué hay en la habitación, quién está cerca, cómo está puesta la mesa, qué ropa hay sobre la cama, si la luz está encendida.

• Decir dónde se encuentra la persona y qué hay alrededor: dirección actual, calles, puntos de referencia, farmacias, panaderías y la parada de autobús más cercana, a partir de datos cartográficos en tiempo real.

• Buscar información en internet: noticias, horarios de apertura, precios, datos actualizados, sin salir de la conversación.

• Leer y reproducir partituras: basta con apuntar la cámara a las notas impresas. Visionauta reconoce las notas, lee la pieza en voz alta y la reproduce directamente en el dispositivo, generando además archivos MusicXML y MIDI. Una función inédita para las músicas y los músicos ciegos, que hasta ahora dependían de la ayuda de terceros o de ediciones en braille escasas y caras.

• Ayudar a las personas ciegas a fotografiar: el asistente de fotos guía el encuadre, avisa cuando la imagen está alineada, hace la cuenta atrás y dispara la cámara, para que salgan bien las fotos familiares, los documentos o las imágenes para redes sociales.

• Pedir un coche por voz: basta con indicar el destino y la aplicación abre Uber, 99, Bolt o Lyft con el viaje ya cargado; solo queda confirmar.

• Responder cualquier pregunta sobre lo que hay frente a la cámara: qué producto es este, hasta cuándo se conserva, de qué color es esta prenda, qué dice este cartel.

VISIONAUTA MAGIC: LA IA QUE DESCRIBE IMÁGENES Y REALIZA TAREAS EN EL TELÉFONO

Visionauta Magic está disponible en exclusiva para Android y para las personas suscritas a Visionauta Plus. Funciona junto con el lector de pantalla del dispositivo, como TalkBack, y resuelve dos viejos problemas de la comunidad:

En primer lugar, describe las imágenes sin etiquetar que aparecen en cualquier aplicación. En cuanto el foco del lector de pantalla se detiene en una imagen, un icono o una tarjeta sin descripción, Visionauta analiza justamente ese elemento y anuncia en voz alta lo que muestra.

En segundo lugar, realiza tareas en el teléfono. La persona dice, por ejemplo, «Abre WhatsApp y envíale un mensaje a Ana», y Visionauta elabora un plan, lo lee en voz alta y solo actúa tras la aprobación de la persona usuaria, comentando cada paso y pudiendo interrumpirse en cualquier momento mediante un botón de parada de emergencia o un doble toque con dos dedos. Sin confirmación no ocurre nada.

LAS FUNCIONES DEL DÍA A DÍA

Además de la conversación, Visionauta mantiene las herramientas que lo hicieron popular en la comunidad de personas ciegas y con baja visión, y muchas de ellas funcionan sin internet:

• Reconocimiento de texto sin conexión: apuntar la cámara a documentos, envases, cartas o carteles y escuchar su contenido.
• Reconocimiento de billetes: real brasileño, dólar estadounidense, euro, peso mexicano, yen, dólar canadiense y australiano, sin conexión.
• Buscador de objetos: decir «Ayúdame a encontrar mi teléfono» y la aplicación rastrea el entorno y avisa del hallazgo mediante vibración y voz.
• Lupa electrónica para baja visión: con zoom y modos de alto contraste, colores invertidos, blanco sobre negro, negro sobre blanco y amarillo sobre azul.
• Linterna con recordatorio por vibración.
• Voces naturales propias: utilizables en todo el sistema, como voz de TalkBack en Android y de VoiceOver en el iPhone, y sin conexión una vez descargadas.

La versión para iPhone está totalmente integrada con VoiceOver y las funciones de accesibilidad de iOS.

SOBRE EL DESARROLLADOR

Jonathan Santos es ingeniero de software especializado en inteligencia artificial y ha trabajado en Google y Samsung. Es investigador y doctorando en Ingeniería Informática en la Universidade Presbiteriana Mackenzie, además de profesor invitado en la Facultad de Ciencias Médicas de la Santa Casa de São Paulo, donde imparte inteligencia artificial generativa aplicada a la salud. Es ciego y se dedica a desarrollar tecnologías accesibles que den independencia a las personas ciegas y con baja visión.

«Agradezco a los profesores Ismar Frango y Nizam Omar, de la Universidade Presbiteriana Mackenzie, que me animaron a convertir un proyecto académico en una herramienta real para la comunidad.» — Jonathan Santos

Visionauta nació durante su máster en Ingeniería Informática, en las asignaturas de Pensamiento Computacional e Inteligencia Artificial.

INFORMACIÓN PARA DESCARGAS:

App: Visionauta
Precio: todas las funciones gratuitas, dentro de cupos diarios; suscripción opcional Visionauta Plus
Plataformas: iOS y Android
Idiomas: portugués, inglés, español, francés, coreano, alemán, japonés, italiano, árabe, ruso y chino simplificado
Descarga iOS: https://apps.apple.com/app/visionauta/id6780104967
Descarga Android: https://play.google.com/store/apps/details?id=br.com.alphamob.aie

Fuente: Visionauta Tensorial Brasil