Suvana: An Integrated Platform for Two-Way Deaf–Hearing Communication in Sri Lankan Sign Language

In molte parti del mondo, la comunicazione è uno scambio condiviso e fluido che avviene senza sforzo tra chi può sentire e chi non può. Ma per la comunità sorda in Sri Lanka, questo scambio è spesso bloccato dalla mancanza di risorse. Non ci sono abbastanza interpreti professionisti per colmare il divario e il paese non possiede ancora una versione singola e completamente standardizzata della propria lingua dei segni su cui tutti possano concordare. Sebbene la tecnologia abbia fatto grandi passi avanti nell'aiutare le persone a comunicare, la maggior parte di questi strumenti è costruita per la lingua dei segni americana (ASL), lasciando in gran parte ignorate le lingue locali come la lingua dei segni dello Sri Lanka da parte degli sviluppatori. Ciò crea una situazione in cui le persone che hanno più bisogno di questi strumenti si ritrovano prive di essi, e la tecnologia esistente spesso non riesce a comprendere i modi unici in cui le persone in Sri Lanka si esprimono con le mani e il volto.

Un ricercatore si è proposto di colmare questa lacuna con una nuova piattaforma digitale chiamata Suvana. Invece di cercare di costruire un'unica, enorme applicazione da zero, ha preso quattro diversi strumenti software che erano stati sviluppati separatamente e li ha cuciti insieme in un'unica esperienza fluida. L'obiettivo non era pretendere di aver risolto interamente il problema delle barriere comunicative, ma dimostrare che questi distinti pezzi potessero lavorare insieme come un unico prodotto. La piattaforma include uno strumento che trasforma i segni manuali in parlato in lingua singalese, una funzione che converte il parlato in singalese in un avatar digitale che risponde con la lingua dei segni, un'app mobile che avvisa gli utenti di suoni importanti come clacson o vetri infranti, e un tutor per la pratica destinato agli udenti che vogliono imparare la lingua. Ciò che rende notevole questo progetto non è solo la combinazione di questi strumenti, ma l'onestà con cui il ricercatore riporta ciò che ha raggiunto e, forse più importante, ciò che non ha ancora dimostrato.

Il risultato più significativo del lavoro proviene dal tutor per la pratica, uno strumento progettato per aiutare gli studenti a esercitarsi nei segni e ricevere feedback sulle loro prestazioni. Il ricercatore ha costruito un sistema che confronta i movimenti delle mani di uno studente con un video di riferimento di un firmatore fluente. Per farlo, ha utilizzato un metodo che allinea le due sequenze di movimento nel tempo, permettendo differenze di velocità in modo che un segno lento ma corretto non venga penalizzato per la lentezza. Tuttavia, durante i test, ha scoperto un limite critico nel funzionamento di questa tecnologia. Ha scoperto che alcuni segni completamente diversi tra loro possono apparire sorprendentemente simili al computer, mentre due persone che eseguono lo stesso identico segno correttamente possono apparire quite diverse l'una dall'altra.

Per questo motivo, il ricercatore si è reso conto che il sistema non può essere utilizzato in sicurezza per indovinare quale segno una persona stia cercando di fare se il computer non sa già cosa dovrebbe stare firmando. Se il sistema cercasse di identificare un segno sconosciuto, probabilmente commetterebbe errori perché la distanza tra due segni diversi è talvolta minore della distanza tra due tentativi corretti dello stesso segno. Invece, il sistema è progettato per funzionare diversamente: allo studente viene chiesto di praticare un segno specifico e il computer si limita a valutare quanto bene sia stata eseguita quella specifica azione. Questo approccio evita la trappola di indovinare la parola sbagliata. Il ricercatore ha misurato quanto bene il sistema potesse distinguere tra un tentativo corretto e uno errato, scoprendo che riusciva a distinguerli con un livello di precisione significativamente migliore del caso casuale, sebbene ancora lontano dalla perfezione.

Il ricercatore è stato anche molto attento a ciò che dichiarava riguardo alle altre parti della piattaforma. Per lo strumento che trasforma i segni in parlato, ha osservato che il sistema funziona bene quando la persona che firma è la stessa su cui il computer è stato addestrato, ma non ha sostenuto che funzionerebbe per chiunque altro. Ha dichiarato esplicitamente che non può ancora dire se il sistema funzionerebbe per una persona nuova che non ha mai visto prima, perché i suoi dati sono limitati. Allo stesso modo, per la parte del sistema che trasforma il parlato in un avatar che firma, è stato chiaro che i movimenti del personaggio digitale sono stati creati da uno studente udente e non sono stati verificati da un firmatore sordo. Presenta questo avatar come una dimostrazione di come funziona la tecnologia, non come un modo validato per comunicare, riconoscendo che senza l'apporto della comunità sorda non può dire se i segni siano effettivamente comprensibili.

Forse la parte più importante dell'articolo è ciò che l'autore dice sul proprio ruolo nel progetto. Tutti e quattro i ricercatori sono persone udenti, il che significa che non possiedono l'esperienza vissuta di essere sordi. Ammettono apertamente di mancare della fluidità e del contesto culturale necessari per giudicare se il sistema che hanno costruito sia davvero utile o accettabile per le persone a cui è destinato. Evidenziano come, nel campo della tecnologia dell'accessibilità, sia comune che i ricercatori udenti costruiscano strumenti senza un input sufficiente dalla comunità sorda, una pratica che può portare a prodotti che mancano l'obiettivo. Descrivono il loro lavoro attuale come un passo verso una soluzione, ma sottolineano che i passi successivi devono coinvolgere direttamente i firmatori sordi. Ciò significa registrare nuovi video di riferimento con insegnanti sordi e far sì che questi ultimi validino il feedback fornito dal sistema.

Il ricercatore conclude che, sebbene abbia integrato con successo questi quattro strumenti in un'unica piattaforma e calibrato il sistema di valutazione basandosi su dati reali, il lavoro è tutt'altro che finito. Hanno misurato come il sistema si comporta rispetto a un set di video registrati, ma non hanno ancora misurato come si comporta con veri studenti o quanto aiuti effettivamente l'apprendimento. Non hanno testato il sistema con un gruppo diversificato di firmatori, né hanno validato il contenuto con la comunità sorda. Le loro scoperte servono come una chiara mappa di ciò che è possibile con la tecnologia attuale e di ciò che rimane ignoto. La strada da seguire, sostengono, richiede di andare oltre la semplice costruzione della tecnologia per garantire che siano le persone che la useranno a guidarne lo sviluppo. Finché ciò non accadrà, il sistema rimane un prototipo promettente piuttosto che una soluzione completa, e il ricercatore è chiaro sul fatto che la vera prova del loro lavoro arriverà solo quando i firmatori sordi saranno coinvolti in ogni fase del processo.