AISEE, EL “OJO” IMPULSADO POR IA

AiSee es un “ojo” impulsado por inteligencia artificial que han desarrollado investigadores de la Universidad Nacional de Singapur. Su objetivo: permitir a las personas con discapacidad visual “ver” los objetos.

Superar los obstáculos diarios con AiSee

Ir de compras es una actividad común para muchos de nosotros, pero para las personas con discapacidad visual, identificar, por ejemplo, los artículos comestibles puede resultar tremendamente abrumador. Un equipo de investigadores de la Escuela de Computación (NUS Computing) de la Universidad Nacional de Singapur presentó AiSee, un dispositivo de asistencia portátil asequible que ayuda a las personas con discapacidad visual a “ver” los objetos que los rodean con la ayuda de inteligencia artificial (IA).

Las personas con discapacidad visual enfrentan obstáculos diarios, particularmente con la identificación de objetos, que es crucial para la toma de decisiones tanto simples como complejas. Si bien los avances en IA han mejorado drásticamente las capacidades de reconocimiento visual, la aplicación en el mundo real de estas tecnologías avanzadas sigue siendo desafiante y propensa a errores.

Desarrollo de AiSee

Las primeras líneas de programación de AiSee son de 2018 y se actualizaron progresivamente a lo largo de cinco años, con el objetivo de superar estas limitaciones aprovechando las tecnologías de inteligencia artificial de última generación. El usuario simplemente necesita sostener un objeto y activar la cámara incorporada para capturar una imagen del objeto. Con la ayuda de la IA, AiSee identificará el objeto y también proporcionará más información cuando el usuario la solicite.

El investigador jefe del proyecto, profesor Suranga Nanayakkara, afirma al respecto que “con AiSee, nuestro objetivo es brindar a los usuarios una interacción más natural. Siguiendo un proceso de diseño centrado en el ser humano, encontramos razones para cuestionar el enfoque típico de utilizar gafas aumentadas con una cámara. (…). Por ello, proponemos un hardware alternativo que incorpora unos discretos auriculares de conducción ósea.”

¿Cómo funciona AiSee?

AiSee es un dispositivo que se lleva en la cabeza, similar a unos auriculares de música. Tiene forma de cinta, con una parte central que se coloca en la nuca del usuario y dos pequeños pivotes que se enganchan a sus orejas. Este diseño permite que el dispositivo se mantenga cómodamente en su lugar mientras el usuario se mueve y realiza sus actividades diarias. Consta de tres componentes clave:

El ojo: software informático del motor de visión

AiSee incorpora una micro cámara que capta el campo de visión del usuario. Esto forma el componente de software de AiSee, también conocido como “ordenador con motor de visión“. El software es capaz de extraer características como texto, logotipos y etiquetas de la imagen capturada para su procesamiento.

El cerebro: unidad de procesamiento de imágenes impulsada por IA y sistema interactivo de preguntas y respuestas

Después de que el usuario toma una fotografía del objeto de interés, AiSee utiliza sofisticados algoritmos de inteligencia artificial basados en la nube para procesar y analizar las imágenes capturadas para identificar el objeto. El usuario también puede hacer una serie de preguntas para saber más sobre el objeto.

AiSee emplea tecnología avanzada de reconocimiento y procesamiento de texto a voz y de voz a texto para identificar objetos y comprender las consultas del usuario. Impulsado por un gran modelo de lenguaje, AiSee se destaca en los intercambios interactivos de preguntas y respuestas, lo que permite que el sistema comprenda y responda con precisión las consultas del usuario de manera rápida e informativa.

En comparación con la mayoría de los dispositivos de asistencia portátiles que requieren emparejamiento con un teléfono inteligente, AiSee funciona como un sistema autónomo que puede funcionar de forma independiente sin necesidad de dispositivos adicionales.

El orador: sistema de sonido de conducción ósea

Los auriculares de AiSee utilizan tecnología de conducción ósea, que permite la transmisión del sonido a través de los huesos del cráneo. Esto garantiza que las personas con discapacidad visual puedan recibir información auditiva de forma eficaz y al mismo tiempo tener acceso a sonidos externos, como conversaciones o ruido del tráfico. Esto es particularmente vital para las personas con discapacidad visual, ya que los sonidos ambientales proporcionan información esencial para la toma de decisiones, especialmente en situaciones que implican consideraciones de seguridad.

Pruebas de usuario y mejoras adicionales de AiSee

Actualmente, el dispositivo se encuentra en fase de pruebas por lo que no está disponible en el mercado. El profesor Nanayakkara y su equipo están actualmente en conversaciones con diversas asociaciones e instituciones en Singapur para realizar pruebas de usuario con personas con discapacidad visual. Los hallazgos ayudarán a refinar y mejorar las funciones y el rendimiento de AiSee.