Η Microsoft δημιουργεί εφαρμογή για να διευκολύνει την επικοινωνία των ατόμων με ALS

Εικονίδιο ώρας ανάγνωσης 2 λεπτό. ανάγνωση


Οι αναγνώστες βοηθούν στην υποστήριξη του MSpoweruser. Ενδέχεται να λάβουμε προμήθεια εάν αγοράσετε μέσω των συνδέσμων μας. Εικονίδιο επεξήγησης εργαλείου

Διαβάστε τη σελίδα αποκάλυψης για να μάθετε πώς μπορείτε να βοηθήσετε το MSPoweruser να διατηρήσει τη συντακτική ομάδα Διάβασε περισσότερα

Η Microsoft έχει αναπτύξει μια εφαρμογή για smartphone που ονομάζεται GazeSpeak, η οποία διευκολύνει όσους πάσχουν από νόσο του κινητικού νευρώνα να επικοινωνούν χρησιμοποιώντας μόνο τα μάτια τους.

Η εφαρμογή χρησιμοποιεί βίντεο που καταγράφηκε σε πραγματικό χρόνο από την κάμερα του smartphone για να μετατρέψει το βλέμμα σε ομιλία και χρησιμοποιεί ένα αυτοκόλλητο στο πίσω μέρος του τηλεφώνου με ένα πλέγμα γραμμάτων που κοιτάζει ο ομιλητής για να υποδείξει την επιλογή του και να διατυπώσει το μήνυμά του.

Η εφαρμογή χρησιμοποιεί τεχνητή νοημοσύνη παρόμοια με την προγνωστική αποστολή γραπτών μηνυμάτων για να γνωρίζει ποια από τα γράμματα σε κάθε σκέλος του πλέγματος επιλέγει ο ομιλητής. Οι τέσσερις πρώτες προβλέψεις λέξεων εμφανίζονται στην οθόνη και η πρώτη διαβάζεται δυνατά.

«Για παράδειγμα, για να πουν τη λέξη «εργασία», κοιτούν πρώτα προς τα κάτω για να επιλέξουν την ομάδα που περιέχει το «t», μετά προς τα πάνω για να επιλέξουν την ομάδα που περιέχει «α» και ούτω καθεξής», λέει ο Xiaoyi Zhang, ο οποίος ανέπτυξε το GazeSpeak ενώ ήταν ασκούμενος στη Microsoft.

«Χρησιμοποιούμε όραση υπολογιστή για να αναγνωρίσουμε τις χειρονομίες των ματιών και τεχνητή νοημοσύνη για να κάνουμε την πρόβλεψη των λέξεων», λέει η Meredith Morris στο Microsoft Research στο Redmond της Ουάσιγκτον.

Τα άτομα με νόσο του κινητικού νευρώνα (κοινώς αποκαλούμενη ALS) έχουν συχνά κίνηση μόνο στα μάτια τους, αφήνοντας αυτή τη μοναδική μέθοδο έκφρασης.

«Οι άνθρωποι μπορεί να απογοητευτούν πραγματικά όταν προσπαθούν να επικοινωνήσουν, οπότε αν αυτή η εφαρμογή μπορεί να κάνει τα πράγματα πιο εύκολα, αυτό είναι πολύ καλό», λέει ο Matthew Hollis από την Ένωση Νοσημάτων Κινητήρα Νευρώνα.

Η εφαρμογή smartphone είναι μια καλή εναλλακτική στην παλαιότερη πρακτική χρήσης πινάκων και χειροκίνητης παρακολούθησης βλέμματος από ειδικά εκπαιδευμένους διερμηνείς, κάτι που είναι δύσκολο και λιγότερο αποτελεσματικό, με το GazeSpeak στις δοκιμές να χρειάζεται κατά μέσο όρο 78 δευτερόλεπτα για να ολοκληρώσει μια πρόταση, έναντι 123 δευτερόλεπτα χρησιμοποιώντας τους πίνακες .

«Λατρεύω την τεχνολογία του τηλεφώνου. Απλώς νομίζω ότι αυτό θα ήταν τόσο λείο», είπε ένας από τους διερμηνείς.

Η Microsoft θα παρουσιάσει την εφαρμογή στο Συνέδριο για τους Ανθρώπινους Παράγοντες στα Υπολογιστικά Συστήματα στο Κολοράντο τον Μάιο. Η εφαρμογή, η οποία είναι μόνο για iOS, θα είναι διαθέσιμη στο App Store και ο πηγαίος κώδικας θα είναι επίσης δωρεάν.

Περισσότερα για τα θέματα: ALS, app, ios, microsoft, ασθένεια κινητικών νευρώνων