De onderzoekers van Microsoft hebben een app ontwikkeld waarmee mensen de taal van de ogen kunnen spreken. GazeSpeak is een smartphone-app die is gemaakt door onderzoekers tijdens hun samenwerking met Microsoft.
Microsoft heeft een app ontwikkeld die je ogen kan lezen
Het is moeilijk voor mensen met ALS (amyotrofische laterale sclerose). Het is een ziekte van het zenuwstelsel die zenuwcellen aanvalt, neuronen genoemd in je hersenen en ruggenmerg. Deze gevallen zijn zeer zeldzaam. De persoon die aan ALS lijdt, wordt echter het enige middel om te communiceren.
De onderzoekers van Microsoft hebben een app ontwikkeld waarmee mensen de taal van de ogen kunnen spreken. GazeSpeak is een smartphone-app die is gemaakt door onderzoekers tijdens hun samenwerking met Microsoft. Het kan ooggebaren in realtime interpreteren en kan voorspellen wat de persoon probeert te zeggen.
De app doet het eenvoudige werk. Het verdeelt alfabetten in het raster van vier vakjes die zichtbaar zijn voor de persoon die ALS heeft via een sticker op de achterkant van het apparaat. De patiënt moet naar de stickers kijken en de app kan de reactie registreren die overeenkomt met het omhoog, rechts, links en omlaag kijken.
Xiaoyi Zhang, stagiair bij Microsoft Research, legt uit: “Om bijvoorbeeld het woord ’taak’ te zeggen, kijken ze eerst naar beneden om de groep met ’t’ te selecteren, dan omhoog om de groep met ‘a’ te selecteren, enzovoort,” GazeSpeak gebruikt vervolgens AI en voorspellende sms-berichten om het woord te raden waar ze naar op zoek waren.
Meredith Morris van Microsoft Research in Redmond, Washington zei: “We gebruiken computervisie om de ooggebaren te herkennen en AI om de woordvoorspelling te doen.” Welnu, de andere methode die wordt gebruikt om te communiceren met patiënten die aan deze ziekte lijden, is door brieven op een bord te schrijven en oogbewegingen te volgen. Maar GazeSpeak verslaat alle andere methoden door gemiddeld 78 seconden te nemen, in tegenstelling tot bestaande methoden die 123 seconden nodig hebben om een zin af te maken.
Volgens de rapporten gaat Microsoft de app voor iOS-apparaten lanceren voordat de Conferentie over menselijke factoren in computersystemen die in mei 2017 zal plaatsvinden, zou de broncode van de app vrij beschikbaar zijn.
Dus, wat vind je hiervan? Deel uw mening in het opmerkingenveld hieronder!