Su lanzamiento coincide con el Día Internacional de las Personas con Discapacidad, cuyas vidas pretende hacer "un poco más fáciles". Así lo declaró a Servimedia Saqib Shaikh, el ingeniero de Microsoft jefe del proyecto de esta app, cuya versión en inglés fue lanzada en 2017.

Shaikh es también ciego y empezó en esto "como un hobby". "Mi objetivo fue utilizar la inteligencia artificial para ayudar a las personas con discapacidad visual".

Seeing AI dispone de distintos canales o modos que permiten la lectura de textos breves y de etiquetas (mediante la cámara del teléfono); el reconocimiento de códigos de barras; el escaneado y posterior lectura de documentos de mayor longitud (también de aquellos escritos a mano); la identificación de colores; la determinación de monedas y billetes (dólares, euros, libras...); el reconocimiento facial; el calibrado de la luminosidad mediante pitidos, y la descripción de escenas, ya sean entornos naturales, fotografías tomadas con el teléfono o imágenes de otras APP como WhatsApp o Hotmail.

"Todo esto lo verbaliza en voz alta la AP", y "por eso es tan importante el lanzamiento de las versiones en otros idiomas", apunta Shaikh, que "era algo que los usuarios nos pedían desde el principio".

Desde que Seeing AI salió al mercado, todos los usuarios han podido comunicar sus quejas y sugerencias de mejora al equipo de desarrolladores, "siempre con el propósito de mejorar la app y adaptarnos mejor a las demandas".

IMPACTOS

Según Shaikh, "nos gusta hablar del impacto de la tecnología en la vida de la gente", así que sabemos que desde la salida de Seing AI, nuestros usuarios han realizado 20 millones de tareas con esta app".

A nivel personal, asegura que "fue emocionante la primera vez que Seing AI le describió una escena. La aplicación guía al usuario para enfocar bien y obtener una buena foto o un escaneado correcto. A partir de ahí, es capaz de reconocer lo que se ve y describirlo, con la ventaja de que se puede personalizar.

Seeing AI "no solo te cuenta que en una habitación hay dos sillas, una mesa, tres personas de entre 40 y 50 años y un niño de unos 10, sino que puede ir más allá y narrar que en la habitación están tu padre, tu hijo y otras dos personas desconocidas, vestidas de tal o cual manera", aclara el experto. "Sólo hay que añadir la información en el móvil".

Del mismo modo, la app reconoce personas y lugares conocidos, de modo que si ha de describir un meme, es capaz de afinar y señalar que la imagen muestra a Pablo Iglesias y al presidente Sánchez dándose la mano (si es el caso).

Gracias a ella, "hay personas ciegas que pueden controlar si todos los estudiantes han entrado en clase", o algo tan simple como "distinguir el bote de gel del de champú en un hotel".

COLABORACIÓN CON ONCE

Microsoft ha contado con la colaboración de ONCE y Fundación ONCE para el desarrollo de la versión en español de Seen AI. Cristian Sáinz, responsable de las unidades de puesto de trabajo digital y de accesibilidad de la ONCE, fue una de las personas implicadas en el proyecto desde el inicio.

"Era algo que llevábamos demandando a Microsoft desde hace tiempo", señala Sáinz, así que "en cuanto nos lo propusieron, nos pusimos a ello". "Nuestra participación consistió básicamente en la revisión del vocabulario. Hemos hecho muchas aportaciones para mejorar la claridad de los textos y las descripciones, a fin de adaptarlas al uso común del idioma". Estas sugerencias fueron enviadas a los desarrolladores de Microsoft, que "son los encargados finales de incluirlas en la nueva versión".

Sáinz utiliza la app desde que fue lanzada en 2017. Confiesa que le ha resultado "muy útil", aunque admite que "si no hablas inglés, hay muchas cosas que te puedes perder". Al principio, bastante gente se descargó esta app en España", recuerda, "pero luego hubo un parón".

"Por eso, su lanzamiento en castellano nos permitirá llegar a nuevos nichos de mercado y a millones de nuevos usuarios". Ese es el objetivo de Microsoft y la ONCE, según destacó.

COCINAR CON LA APP

Aficionado a la cocina y antiguo propietario de un restaurante, Sáinz señala que una de las funciones que más le gustan de Seeing AI es que puede usarla para saber las medidas exactas que necesita cuando cocina. Tiene una báscula que enuncia en voz alta los pesos de los alimentos, pero solo en intervalos de cinco gramos.

“Hay recetas en las que necesito un gramo, no cinco, destaca, y "ahora, puedo obtener esa información en unos segundos. Solo tengo que apuntar el móvil con el canal de texto breve de Seeing AI a la pantalla de la báscula y la aplicación la lee en voz alta. De este modo, he podido empezar a usar recetas que antes no podía hacer”, comenta satisfecho.

Otra función de Seeing AI desarrollada a petición de los usuarios fue la posibilidad de explorar de manera táctil las fotos familiares o de las redes sociales y oír descripciones de las imágenes. Con ella, “es muy sencillo saber qué información contienen las fotos”, confirma Sainz. Solo hay que "deslizar el dedo por la pantalla y la aplicación describe dónde están los objetos en una escena”.

Microsoft pretende demostrar con esta innovación que está firmemente comprometida con el desarrollo de tecnologías accesibles, a fin de mejorar la autonomía de las personas con discapacidad. Por ello, colabora con ONCE y Fundación ONCE desde hace 20 años.

En 2018, Microsoft anunció AI for Accessibility, una iniciativa global que prevé una inversión de 25 millones de dólares en 5 años para el desarrollo de tecnologías y soluciones de accesibilidad que aprovechen el poder de la Inteligencia Artificial para apoyar a los más de mil millones de personas en el mundo con algún tipo de discapacidad.