Contrariamente alle idee sbagliate comuni, la lingua dei segni americana (ASL) non è semplicemente inglese segnato. È una lingua completamente distinta con un proprio sistema grammaticale unico. Questo può rendere la comunicazione tra chi conosce l’ASL e chi non la conosce una sfida. Fortunatamente, i ricercatori della Cornell University stanno lavorando per mitigare questi ostacoli conversazionali attraverso la tecnologia indossabile.
Come descritto nel loro articolo di ricerca, hanno sviluppato lo SpellRing, un dispositivo delle dimensioni di un quarto con un microfono e un altoparlante integrati, progettato per essere indossato sul pollice. Ecco come funziona: il microfono e l’altoparlante emettono e captano onde sonore silenziose mentre chi lo indossa muove le mani e le dita. Nel frattempo, un piccolo giroscopio traccia anche i movimenti delle mani. Un algoritmo di deep learning elabora queste immagini sonar e le traduce in lettere ASL in tempo reale.
Questa non è la prima tecnologia progettata per interpretare i gesti delle dita in lingua dei segni. Tuttavia, i dispositivi esistenti tendono ad essere ingombranti, rendendoli difficili da usare. Hyunchul Lim, coautore dell’articolo, e altri ricercatori del Cornell Ann S. Bowers College of Computing and Information Science sono stati ispirati a cercare soluzioni più adatte alla vita quotidiana.
Secondo il Cornell Chronicle, lo SpellRing ha un’accuratezza simile rispetto ai dispositivi di traduzione più grandi. Gli sviluppatori hanno testato il gadget utilizzando 20 firmatari ASL esperti e principianti, ai quali è stato chiesto di compitare oltre 20.000 parole. L’accuratezza dello SpellRing variava tra l’82 e il 92 percento, a seconda della lunghezza e della difficoltà dei termini. Sebbene non perfetti, i numeri sono comunque impressionanti. Addestrare un’IA a riconoscere 26 forme delle mani per ogni lettera dell’alfabeto è una sfida, poiché i firmatari naturalmente adattano la loro formazione per facilitare il flusso.
Per portare lo SpellRing al livello successivo, Lim spera un giorno di abbinarlo a occhiali che elaborano i movimenti della parte superiore del corpo e le espressioni facciali dei firmatari. “Le persone sorde e con problemi di udito usano più delle loro mani per l’ASL”, ha detto al Cornell Chronicle. “L’ASL è una lingua visiva molto complicata e complessa.”
La tecnologia non è solo utile per aiutare le persone che già conoscono l’ASL a comunicare, ma può anche essere uno strumento di apprendimento per chi è nuovo alla lingua. Lo strumento gratuito alimentato dall’IA di Nvidia, Signs, rende l’apprendimento della lingua dei segni più facile fornendo feedback istantanei durante la pratica.
Fonte: Mental Floss
