Έξυπνα δαχτυλίδια μεταφράζουν τη νοηματική γλώσσα σε πραγματικό χρόνο. Ειδικότερα, μια ομάδα Νοτιοκορεατών ερευνητών ανέπτυξε ένα σύστημα μετάφρασης ικανό να μετατρέπει άμεσα τις κινήσεις των χεριών στη νοηματική γλώσσα σε κείμενο, χρησιμοποιώντας επτά δακτυλίους εξοπλισμένους με αισθητήρες.
Ο μηχανισμός, που ονομάζεται WRSLT, παρουσιάστηκε στο περιοδικό Science Advances και πέτυχε ακρίβεια αναγνώρισης άνω του 88% τόσο για την αμερικανική όσο και για τη διεθνή νοηματική γλώσσα.
Αυτή η πρόοδος έρχεται εν μέσω μιας μεγάλης ζήτησης για λύσεις χωρίς αποκλεισμούς: για εκατομμύρια κωφά άτομα, η νοηματική γλώσσα είναι το κύριο μέσο επικοινωνίας. Ωστόσο, η γραμματική της πολυπλοκότητα και ποικιλομορφία – υπάρχουν περισσότερες από 300 διαφορετικές νοηματικές γλώσσες παγκοσμίως , σύμφωνα με την Παγκόσμια Ομοσπονδία Κωφών – δυσκολεύουν την κατανόηση όσων δεν μιλούν άπταιστα αυτά τα συστήματα. Οι τρέχουσες μέθοδοι, όπως τα γάντια με αισθητήρες ή οι ενσύρματες συσκευές, είναι συχνά δυσκίνητες και μη πρακτικές για καθημερινή χρήση.
Το νέο σύστημα χρησιμοποιεί πλήρως ασύρματους και ελαφριούς έξυπνους δακτυλίους, επιτρέποντας τη μετάφραση φυσικών χειρονομιών και εξαλείφοντας την ανάγκη για ατομική βαθμονόμηση. Οι πληροφορίες που συλλέγονται από τους αισθητήρες υποβάλλονται σε επεξεργασία από τεχνητή νοημοσύνη, η οποία μεταφράζει τις κινήσεις σε πραγματικό χρόνο και εμφανίζει το κείμενο σε τηλέφωνο ή υπολογιστή.
Πώς λειτουργούν τα έξυπνα δαχτυλίδια για τη μετάφραση της νοηματικής γλώσσας
Το WRSLT αποτελείται από επτά ασύρματα δαχτυλίδια που τοποθετούνται σε συγκεκριμένα δάχτυλα, το καθένα από τα οποία είναι εξοπλισμένο με ένα μικροσκοπικό επιταχυνσιόμετρο παρόμοιο με αυτό που χρησιμοποιούν τα smartphone για την ανίχνευση της κατεύθυνσης της οθόνης. Αυτοί οι αισθητήρες καταγράφουν τόσο τη θέση όσο και την κίνηση κάθε δακτύλου σε σχέση με τη βαρύτητα, αποτυπώνοντας την πολυπλοκότητα των χειρονομιών που χαρακτηρίζουν τη νοηματική γλώσσα.
Τα δεδομένα που συλλέγουν τα δαχτυλίδια μεταδίδονται μέσω τεχνολογίας Bluetooth multilink σε μια κινητή συσκευή ή έναν υπολογιστή. Εκεί, ένα σύστημα τεχνητής νοημοσύνης αναλύει την ακολουθία των κινήσεων και τις μετατρέπει σε γραπτό κείμενο σχεδόν αμέσως. Αυτή η προσέγγιση επιτρέπει την εκτέλεση των νοημάτων με φυσικό τρόπο, χωρίς περιορισμούς που οφείλονται σε καλώδια ή προηγούμενες ρυθμίσεις.
Σύμφωνα με τους προγραμματιστές, το σύστημα αναγνωρίζει 100 λέξεις στην Αμερικανική Νοηματική Γλώσσα (ASL) και 100 στη Διεθνή Νοηματική Γλώσσα (ISL), επιτρέποντας τη μετάφραση ολόκληρων φράσεων χάρη σε ένα πλαίσιο διαδοχικής ανίχνευσης που ερμηνεύει τα νοήματα στο πλαίσιο τους.
Ποια αποτελέσματα έδειξε το WRSLT στις δοκιμές με χρήστες;
Η απόδοση του WRSLT αξιολογήθηκε σε μια ομάδα χρηστών που δεν είχαν συμμετάσχει στην αρχική εκπαίδευση του συστήματος. Σύμφωνα με τα αποτελέσματα που δημοσιεύτηκαν στο Science Advances, το σύστημα πέτυχε ακρίβεια 88,5 % για τη Διεθνή Νοηματική Γλώσσα και 88,3 % για την Αμερικανική Νοηματική Γλώσσα. Οι ερευνητές τόνισαν ότι η πλατφόρμα επέδειξε υψηλή ανθεκτικότητα, καθώς διατήρησε την ικανότητα αναγνώρισης παρά τις ατομικές διαφορές στην ευθυγράμμιση των αισθητήρων και τα προσωπικά στυλ νοηματικής.
«Παρά τη μεταβλητότητα μεταξύ των χρηστών και τις πιθανές διαφορές στην ευθυγράμμιση των αισθητήρων, το σύστημα πέτυχε υψηλή ακρίβεια αναγνώρισης, γεγονός που επικυρώνει τη γενικευσιμότητα και την ανθεκτικότητα της προτεινόμενης πλατφόρμας», σημείωσαν οι υπεύθυνοι της μελέτης.
Αυτά τα αποτελέσματα καθιστούν το WRSLT μια ευέλικτη και προσαρμόσιμη εναλλακτική λύση για τη μετάφραση της νοηματικής γλώσσας σε πραγματικό χρόνο, με δυνατότητες να διευκολύνει την επικοινωνία σε καθημερινά και επαγγελματικά περιβάλλοντα.
Ποιες καινοτομίες εισάγει σε σύγκριση με τις προηγούμενες τεχνολογίες
Το WRSLT αποτελεί βελτίωση σε σχέση με προηγούμενες συσκευές, όπως ογκώδη γάντια ή συστοιχίες αισθητήρων με καλώδια, που περιορίζουν τις κινήσεις και απαιτούν βαθμονόμηση για κάθε χρήστη. Η αρθρωτή και ασύρματη αρχιτεκτονική των δακτυλίων επιτρέπει την πλήρη κινητικότητα των δακτύλων και μια άνετη εμπειρία χρήσης, φέρνοντας την τεχνολογία πιο κοντά στην καθημερινή ζωή των ατόμων με κώφωση ή προβλήματα ακοής.
Σε αντίθεση με τα παραδοσιακά συστήματα, το WRSLT δεν ανιχνεύει μόνο στατικές χειρονομίες, αλλά ερμηνεύει και δυναμικές κινήσεις του χεριού, αυξάνοντας την ακρίβεια και τη φυσικότητα της μετάφρασης. Καθώς δεν απαιτείται ατομική βαθμονόμηση, το σύστημα μπορεί να χρησιμοποιηθεί από διαφορετικά άτομα χωρίς εξατομικευμένες ρυθμίσεις, κάτι που αποτελεί βασικό βήμα για τη μαζική διάδοσή του.
Αυτή η λύση ανταποκρίνεται στην πρόκληση της προσβάσιμης επικοινωνίας σε έναν κόσμο όπου η ποικιλομορφία των νοηματικών γλωσσών δημιουργεί εμπόδια στην ένταξη. Σύμφωνα με την Παγκόσμια Ομοσπονδία Κωφών, περισσότερα από 70 εκατομμύρια άτομα χρησιμοποιούν κάποια μορφή νοηματικής γλώσσας, γεγονός που υπογραμμίζει τη σημασία των διαλειτουργικών και προσαρμόσιμων τεχνολογιών.
Ποιες είναι οι επόμενες προκλήσεις για την ανάπτυξη αυτής της τεχνολογίας;
Η ερευνητική ομάδα της Νότιας Κορέας εργάζεται τώρα για την περαιτέρω μικροποίηση των δακτυλίων και την επέκταση του λεξιλογίου που αναγνωρίζει η τεχνητή νοημοσύνη, με στόχο να συμπεριληφθούν περισσότερες λέξεις και να προστεθούν άλλες νοηματικές γλώσσες στην πλατφόρμα. Σκοπός είναι να βελτιστοποιηθεί η φορητότητα του συστήματος και να αυξηθεί η παγκόσμια εφαρμογή του, διευκολύνοντας έτσι έναν μεγαλύτερο αριθμό κωφών ατόμων να έχουν πρόσβαση σε ένα εργαλείο άμεσης και ακριβούς επικοινωνίας.
Η εξέλιξη συστημάτων όπως το WRSLT ανοίγει νέες προοπτικές για την ένταξη και την προσβασιμότητα στην επικοινωνία και σηματοδοτεί μια πρόοδο στην ενσωμάτωση της τεχνητής νοημοσύνης και των φορητών συσκευών στην καθημερινή ζωή όσων εξαρτώνται από τη νοηματική γλώσσα.
