I ricercatori dell'Università di Singapore presentano l'ultimo prototipo di cuffia AiSee che consente ai non vedenti di vedere il mondo attraverso le descrizioni vocali dell'intelligenza artificiale
I ricercatori dell'Augmented Human Lab dell'Università Nazionale di Singapore hanno dimostrato l'ultimo prototipo di auricolare AiSee per i non vedenti. Nato da un progetto dell'Università di Auckland nel 2018, l'auricolare dotato di intelligenza artificiale utilizza una telecamera per identificare gli oggetti e fornire una descrizione vocale a chi lo indossa e ha problemi di vista.
I non vedenti e le persone ipovedenti hanno spesso il problema di capire cosa hanno davanti. Distinguere i barattoli di zuppa diventa una sfida, data l'identica sensazione delle etichette e dei barattoli. La ricerca di immagini negli smartphone può essere utile, ma questo metodo richiede uno smartphone, una connessione dati e una mano libera.
L'AiSee funziona con la semplice pressione di un pulsante dell'orecchio sinistro. Una fotocamera da 13 megapixel cattura le immagini degli oggetti per l'identificazione da parte del sistema AI, che poi parla delle descrizioni degli oggetti a chi li indossa attraverso altoparlanti a conduzione ossea che possono essere ascoltati anche in spazi esterni rumorosi. Questi altoparlanti inoltre non bloccano i suoni ambientali importanti. Una batteria ricaricabile da 1200 mA alimenta l'auricolare.
AiSee rimane in fase di sviluppo per migliorare ulteriormente il dispositivo. Nel frattempo, i lettori che invecchiano con la presbiopia possono provare un bel paio di occhiali con ingrandimento regolabile (come questi su Amazon) per aiutarsi con i punti croce.
Fonte(i)
05 febbraio 2024
I ricercatori della NUS sviluppano un 'occhio' alimentato dall'intelligenza artificiale per consentire alle persone ipovedenti di 'vedere' gli oggetti
Assoc Prof Suranga Nanayakkara (a sinistra) con lo studente della NUS Mark Myres (a destra), che ha testato AiSee come utente ipovedente.
Fare la spesa è un'attività comune per molti di noi, ma per le persone ipovedenti identificare gli articoli della spesa può essere scoraggiante. Un team di ricercatori della Scuola di Informatica dell'Università Nazionale di Singapore (NUS Computing) ha presentato AiSee, un dispositivo di assistenza indossabile a prezzi accessibili che aiuta le persone con disabilità visiva a 'vedere' gli oggetti intorno a loro con l'aiuto dell'intelligenza artificiale (AI).
Le persone con disabilità visiva devono affrontare ostacoli quotidiani, in particolare l'identificazione degli oggetti, che è fondamentale per prendere decisioni semplici e complesse. Sebbene le scoperte nell'AI abbiano migliorato notevolmente le capacità di riconoscimento visivo, l'applicazione nel mondo reale di queste tecnologie avanzate rimane impegnativa e soggetta a errori.
AiSee, che è stato sviluppato per la prima volta nel 2018 e progressivamente aggiornato nell'arco di cinque anni, mira a superare questi limiti sfruttando le tecnologie AI all'avanguardia.
"Con AiSee, il nostro obiettivo è quello di potenziare gli utenti con un'interazione più naturale. Seguendo un processo di progettazione incentrato sull'uomo, abbiamo trovato motivi per mettere in discussione l'approccio tipico dell'utilizzo di occhiali aumentati con una fotocamera. Le persone con disabilità visiva possono essere riluttanti a indossare gli occhiali per evitare la stigmatizzazione. Pertanto, proponiamo un hardware alternativo che incorpora una discreta cuffia a conduzione ossea", ha detto il ricercatore principale del Progetto AiSee, il Professore Associato Suranga Nanayakkara, del Dipartimento di Sistemi Informativi e Analitici della NUS Computing.
L'utente deve semplicemente tenere un oggetto e attivare la fotocamera incorporata per catturare un'immagine dell'oggetto. Con l'aiuto dell'AI, AiSee identificherà l'oggetto e fornirà anche ulteriori informazioni quando l'utente lo interrogherà.
Come funziona AiSee?
AiSee comprende tre componenti chiave:
(1) L'occhio: Il software del motore di visione
AiSee incorpora una microcamera che cattura il campo visivo dell'utente. Questa costituisce il componente software di AiSee, chiamato anche 'computer del motore di visione'. Il software è in grado di estrarre caratteristiche come testo, loghi ed etichette dall'immagine catturata per l'elaborazione.
(2) Il cervello: Unità di elaborazione delle immagini con intelligenza artificiale e sistema interattivo di domande e risposte
Dopo che l'utente scatta una foto dell'oggetto di interesse, AiSee utilizza sofisticati algoritmi di intelligenza artificiale basati sul cloud per elaborare e analizzare le immagini catturate e identificare l'oggetto. L'utente può anche porre una serie di domande per saperne di più sull'oggetto.
AiSee impiega una tecnologia avanzata di riconoscimento ed elaborazione text-to-speech e speech-to-text per identificare gli oggetti e comprendere le domande dell'utente. Grazie a un modello linguistico di grandi dimensioni, AiSee eccelle negli scambi interattivi di domande e risposte, consentendo al sistema di comprendere e rispondere accuratamente alle domande dell'utente in modo rapido e informativo.
Rispetto alla maggior parte dei dispositivi di assistenza indossabili che richiedono l'accoppiamento con lo smartphone, AiSee opera come un sistema autonomo che può funzionare in modo indipendente senza la necessità di dispositivi aggiuntivi.
(3) L'altoparlante: Sistema audio a conduzione ossea
La cuffia di AiSee utilizza la tecnologia a conduzione ossea, che consente la trasmissione del suono attraverso le ossa del cranio. Ciò garantisce che le persone con disabilità visiva possano ricevere efficacemente le informazioni uditive, pur avendo accesso ai suoni esterni, come le conversazioni o il rumore del traffico. Questo è particolarmente vitale per le persone ipovedenti, in quanto i suoni ambientali forniscono informazioni essenziali per il processo decisionale, soprattutto in situazioni che implicano considerazioni sulla sicurezza.
"Attualmente, le persone ipovedenti a Singapore non hanno accesso a una tecnologia AI assistiva di questo livello di sofisticazione. Pertanto, riteniamo che AiSee abbia il potenziale per consentire alle persone ipovedenti di svolgere in modo indipendente compiti che attualmente richiedono assistenza. Il nostro prossimo passo è rendere AiSee conveniente e accessibile alle masse. Per raggiungere questo obiettivo, stiamo apportando ulteriori miglioramenti, tra cui un design più ergonomico e un'unità di elaborazione più veloce", ha spiegato l'Assoc Prof Nanayakkara.
Lo studente della NUS Mark Myres, che ha contribuito a testare AiSee come utente ipovedente, ha commentato: "Molto spesso i dispositivi di assistenza sembrano molto mirati alle persone totalmente cieche o ipovedenti. Credo che AiSee rappresenti un buon equilibrio. Sia le persone ipovedenti che quelle non vedenti potrebbero trarne molti vantaggi"
Test sugli utenti e ulteriori miglioramenti
L'Assoc Prof Nanayakkara e il suo team stanno attualmente discutendo con SG Enable a Singapore per condurre test di utilizzo con persone con disabilità visiva. I risultati contribuiranno a perfezionare e migliorare le funzioni e le prestazioni di AiSee. Inoltre, B.P. De Silva Holdings Pte Ltd ha fatto una generosa donazione di 150.000 S$ per sostenere il progetto.
La decisione di BPH di contribuire allo sviluppo di AiSee è radicata nel suo impegno per la responsabilità sociale d'impresa e nel desiderio genuino di avere un impatto positivo sulla società, con la missione più ampia di promuovere l'inclusività e l'accessibilità. Il suo impegno filantropico riflette anche la sua fede nel potere trasformativo della tecnologia per affrontare le sfide sociali e creare un mondo più equo e inclusivo.
La signora Ku Geok Boon, Amministratore Delegato di SG Enable, ha dichiarato: "Le soluzioni innovative abilitate dalle tecnologie assistive possono cambiare la vita delle persone con disabilità, sia per aiutarle a vivere in modo più indipendente che per ridurre le barriere all'occupazione. In qualità di agenzia focale e di facilitatore del settore per la disabilità e l'inclusione a Singapore, SG Enable è lieta di collaborare con partner come NUS e B.P. De Silva Holdings Pte Ltd per sfruttare la tecnologia per potenziare le persone con disabilità"
Oltre a questo progetto, SG Enable intende collaborare con la NUS per esplorare come l'AI, l'interfaccia uomo-computer e la tecnologia assistiva possano offrire alle persone con disabilità maggiori opzioni tecnologiche.
