CapisciAMe for WIN

CapisciAMe for WIN: come l’uso dell’AI renda possibile l’Accessibilità Vocale dei dispositivi informatici, quali PC, alle Persone con Disabilità Neuromotorie e difficoltà nella produzione verbale.

“CapisciAMe for WIN” vuole rappresentare un passo importante verso l’inclusione digitale e l’accessibilità per le persone con disabilità neuromotorie che sperimentano quotidianamente gravi difficoltà nell’interazione con le interfacce utente standard dei dispositivi informatici, come i PC.

Contesto e Obiettivi: Il progetto si basa sulle applicazioni dell’intelligenza artificiale per il riconoscimento vocale automatico (ASR) del parlato non continuo di individui con disturbi del linguaggio o atypical speech, come disartria. Questi utenti, tra cui possiamo annoverare chi ha Tetraparesi Spastica o Parkinson o Ictus o SMA, molto spesso hanno anche gravi disabilità motorie che rendono difficile o impossibile l’uso di dispositivi di input tradizionali come mouse, tastiere o touch screen.

Benefici delle Interfacce Vocali: L’utilizzo di interfacce a controllo vocale rappresenterebbe un enorme vantaggio per queste persone. Consentire loro di accedere ai computer attraverso il riconoscimento vocale potrebbe migliorare significativamente la loro indipendenza e la capacità di svolgere tutte quelle azioni che l’uso di un PC oggi rende possibile.

Challenge Attuali: Tuttavia, gli attuali sistemi ASR mostrano prestazioni scarse nel riconoscimento di pattern atipici, il che limita l’efficacia della tecnologia di riconoscimento vocale proprio per gli utenti che ne trarrebbero maggior beneficio.

Soluzione Proposta: Per affrontare questa sfida, il progetto mira a sviluppare software di interfacce vocali personalizzate. Queste utilizzeranno i servizi ASR su misura realizzati nel progetto “CapisciAMe” e che sfruttano l’architettura Whisper di OpenAI per il riconoscimento di un set ristretto di parole italiane pronunciate da utenti con voce atipica. Grazie alla soluzione software proposta, le persone con disabilità neuromotorie potranno eseguire azioni sul proprio desktop interagendo con i servizi del sistema operativo e con applicazioni senza dover ricorrere a tastiere fisiche, mouse o touch screen.

Obiettivo Finale: Il progetto dimostrerà un’applicazione pratica del riconoscimento vocale atipico per sviluppare nuovi strumenti che possano incrementare l’accessibilità nell’utilizzo pratico di personal computer. L’obiettivo è di contribuire a rendere l’informatica più accessibile a tutti, indipendentemente dalle loro capacità fisiche o linguistiche.

Repo: https://drive.google.com/drive/folders/1fyqoCG4DCzQBHsNdO3p_BFmc6t_M-378?usp=sharing

Video: https://drive.google.com/file/d/141Rhgx5ucrgCLGoF70R3HWeXkZE6RebU/view?usp=sharing