La investigación se está llevando a cabo sobre cómo las gafas inteligentes equipadas con una cámara, IA y una conexión de datos podrían ayudar a las personas sordas a seguir mejor las conversaciones en tiempo real. La tecnología no reemplazará a los audífonos, sino que los mejore, y puede pensarlo un poco como equiparlos con cancelación de ruido inteligente.
El concepto se está estudiando en la Universidad Heriot-Watt en Escocia, y el profesor principal del proyecto Mathini Sellathurai explicó cómo funcionó:
“Simplemente apunta a la cámara o mira a la persona que desea escuchar. Incluso si dos personas hablan de inmediato, la IA usa señales visuales para extraer la voz de la persona que está viendo. Tiene como objetivo apoyar a las personas que usan audífonos y que tienen discapacidades visuales severas, pero podría ayudar a cualquier persona que trabaje en lugares ruidosos, desde plataformas de aceite hasta las solas del hospital”.
Sellathurai dijo que la tecnología dará audífonos, “superpoderes”, y entró en más detalles sobre cómo funcionarán, y dónde encaja la IA. La cámara en las Glasses inteligentes rastrea los movimientos de labios de un altavoz, y a través de la tecnología de lectura de labios y la limpieza de la IA, el ruido de fondo y otras conferaciones circundantes, una versión “limpia” de la voz del altavoz se envía a auditores o auriculares.
Procesamiento en la nube
Sin embargo, el procesamiento no se realiza en el dispositivo. Los gabranes inteligentes enviarán datos a un teléfono conectado, donde luego se envía a los servidores en la nube. Allí, se aplican inteligencia inteligente de IA y la versión final regresó al usuario. Según Sellathurai, solo hay un ligero retraso cuando los datos se envían a través de una conexión 5G.
Actualmente, el equipo está utilizando servidores en la nube en Suecia, y dice que este enfoque es necesario para evitar esforzarse demasiado en un dispositivo portátil. Sin embargo, puede haber preocupaciones de privacidad no solo sobre un usuario que registra una conversación en tiempo real, sino también la integridad de esos datos cuando se transfiere y analiza en la nube.
El uso de gafas inteligentes con una cámara, audífonos y tecnología de IA para mejorar la audición puede parecer una forma demasiado compleja de abordar el problema, pero es un enfoque establecido conocido como mejora del habla audiovisual. Ya se usa en dispositivos auditivos para mejorar la voz de una persona que habla en un entorno ruidoso, en la producción de video y en los audífonos como un tipo de cancelación de ruido.
Competencia y prototipos
Tecnología similar se ha demostrado en el pasado. Tecnología de voz a texto de Transcripción se incorporó a las gafas inteligentes Vuzix Z100, donde las conversaciones se transcribieron a la pantalla del Z100 para que el usuario lea, como subtítulos para el mundo que los rodea. El Lentes de audio nuance Combine tanto las lentes correctivas como la tecnología de audífonos en gafas inteligentes. El Ray-Ban Meta, una de las mejores gafas inteligentes actuales que puede comprar, incluye características de accesibilidad para aquellos con impedimentos auditivos y de visión.
Las gafas de TranscribegLass comienzan en $ 377 y requieren una suscripción de $ 20 por mes, mientras que los gafas de audio de matices cuestan desde $ 1,200. El profesor Sellathurai dijo La intención es aumentar la cantidad de opciones disponibles para las personas con discapacidad auditiva y ayudar, “los niños y los adultos mayores acceden al apoyo auditivo asequible y con IA”.
Los investigadores están en conversaciones con fabricantes de audífonos sobre asociaciones y cómo reducir los costos, y esperan tener un par prototipo de gafas inteligentes en 2026.