Η εφαρμογή μετάφρασης νοηματικής γλώσσας θα γίνει ποτέ πραγματικότητα;

Διαφήμιση

Φανταστείτε έναν κόσμο όπου τα εμπόδια μεταξύ των κωφών και της ακοής έχουν φύγει. Ένας κόσμος όπου οι συνομιλίες ρέουν ρευστά μεταξύ εκείνων που ακούνε ήχο και εκείνων που δεν ακούνε. Θα μπορούσε αυτός ο κόσμος να γίνει πραγματικός στο εγγύς μέλλον;

Τον Ιούνιο, μια ομάδα μαθητών μάρκετινγκ στο Berghs School of Communication ανέπτυξε ένα πρωτότυπο βίντεο για ένα φανταστικό προϊόν που ονομάζεται Google Gesture. Το προϊόν περιλάμβανε μια φορητή ζώνη καρπού και μια εφαρμογή για κινητά που χρησιμοποίησε ηλεκτρομυογραφία για να διαβάσει τις μυϊκές κινήσεις ενός κωφού που κάνει νοηματική γλώσσα. Στη συνέχεια, το σύστημα πέρασε αυτά τα σήματα στην εφαρμογή, η οποία μετέφρασε αυτά τα σήματα σε ψηφιοποιημένη φωνή και θα μιλούσε για το άτομο.

Η παρακολούθηση του ψεύτικου βίντεο μάρκετινγκ ήταν πολύ συναρπαστική. Τόσο συναρπαστικό, στην πραγματικότητα, ότι σημαντικοί τεχνολογικοί ιστότοποι όπως το Mashable, το Slashgear και άλλοι ανακοίνωσαν αρχικά το προϊόν ως πραγματικό και στη συνέχεια έπρεπε να επαναλάβουν την αξίωση και να ζητήσουν συγνώμη για το λάθος τους. Ήταν ένα παράξενο σφάλμα, δεδομένου ότι υπάρχει πραγματικά

είναι ένα προϊόν Google που ονομάζεται Google Gesture Search [Δεν υπάρχει πλέον διαθέσιμο], το οποίο σας επιτρέπει να σχεδιάζετε χειρονομίες στην οθόνη του κινητού σας για αναζήτηση επαφών, σελιδοδεικτών και άλλων.

Ανεξάρτητα, η ιδέα των μαθητών των Berghs παρουσίασε μια αξιοσημείωτη ιδέα, οδηγώντας στην ερώτηση - θα ήταν δυνατόν να δημιουργήσουμε μια τέτοια εφαρμογή για πραγματική;

Είναι δυνατή η μετάφραση νοηματικής γλώσσας;

Η διάσπαση της έννοιας μάρκετινγκ σε τεχνικό επίπεδο αποκαλύπτει ότι η τεχνολογία που χρησιμοποιεί την ηλεκτρομυογραφία (EMG) για να «αισθανθεί» τη νοηματική γλώσσα δεν είναι πραγματικά τόσο μακριά. Από το 2009, ερευνητές από το Πανεπιστήμιο της Ουάσιγκτον κατάφεραν να χρησιμοποιήσουν πολλούς αισθητήρες EMG για να αποκωδικοποιήσουν τις κινήσεις των μυών και να τις μετατρέψουν σε πραγματικές χειρονομίες χεριών και χεριών.

Οι ερευνητές δημιούργησαν μια πλήρη «βιβλιοθήκη αναγνώρισης χειρονομίας», προσδιορίζοντας ποια μυϊκά σήματα αντιπροσώπευαν ποια χειρονομία. Η έρευνα αποδεικνύει ότι αυτό το είδος τεχνολογίας είναι διαθέσιμο και έτοιμο να εφαρμοστεί στο είδος της εφαρμογής που οραματίστηκαν οι μαθητές Berghs.

Έτσι κάποιος το έχει καταφέρει πραγματικά; Εάν όχι, γιατί κανείς δεν το κάνει και παρέχει στους κωφούς και στα άτομα με προβλήματα ακοής τη δυνατότητα να επικοινωνούν με οποιονδήποτε στον κόσμο μέσω της νοηματικής γλώσσας;

Το μέλλον της τεχνολογίας μετάφρασης σε πραγματικό χρόνο

Η αλήθεια είναι ότι κάποιος εργάζεται στην πραγματικότητα σε μια τέτοια τεχνολογία μετάφρασης νοηματικής γλώσσας σε πραγματικό χρόνο.

Υπάρχει μια εταιρεία που ονομάζεται SpeechTrans [Broken URL Removed], η οποία ωθεί τα όρια του τεχνολογίες μετάφρασης Ξεχάστε τη Μετάφραση Google: 3 τρόποι για να λάβετε μια ακριβή, γρήγορη μετάφρασηΕίτε σκοπεύετε να υποβάλετε αίτηση για εργασία ή διαμέρισμα στο εξωτερικό, είτε θέλετε να μεταφράσετε την ιστοσελίδα σας, πρέπει να διορθώσετε τα πράγματα ακόμα και με μια ξένη γλώσσα. Διαβάστε περισσότερα Τα τελευταία χρόνια. Το SpeechTrans συνεργάζεται με τεχνολογικούς συνεργάτες για να παράγει μερικές από τις πιο αξιόλογες υπηρεσίες μετάφρασης γλωσσών σε πραγματικό χρόνο στην αγορά σήμερα. Πρόκειται για υπηρεσίες που μεταφράζουν συνομιλία κειμένου σε συνομιλία κειμένου, φωνή σε κείμενο, ακόμη και μετάφραση γλώσσας φωνής σε φωνή σε πραγματικό χρόνο μέσω εφαρμογών κινητού τηλεφώνου και επιτραπέζιου υπολογιστή.

Για να διερευνήσει εάν μια τεχνολογία νοηματικής γλώσσας θα μπορούσε να γίνει πραγματικότητα στο εγγύς μέλλον, το MakeUseOf κάθισε με τον CEO της SpeechTrans John Frei και τον COO Yan Auerbach για να συζητήσουν αυτό το πρωτοποριακό νέο τεχνολογία μετάφρασης Κατανοήστε οποιαδήποτε γλώσσα με αυτούς τους 5 ιστότοπους μετάφρασης γλωσσώνΗ τεχνολογία έχει κάνει τον κόσμο μικρότερο μέρος. Άνθρωποι από κάθε μέρος αυτού του πλανήτη χρησιμοποιούν πολλά από τα ίδια εργαλεία, επισκέπτονται κάποιους από τους ίδιους ιστότοπους και κάνουν μίξη σε διάφορα δωμάτια συνομιλίας στο διαδίκτυο. Ο... Διαβάστε περισσότερα και πόσο μακριά μπορεί να είναι στο μέλλον.

Ανάπτυξη εφαρμογής μετάφρασης νοηματικής γλώσσας

ΜΟΥ: Είναι δυνατόν να κάνουμε το είδος της νοηματικής γλώσσας στη μετάφραση ομιλίας που παρουσίασαν οι μαθητές των Berghs σε αυτό το πρωτότυπο βίντεο Google Gesture;

Γιάννης: Θα έλεγα ότι η τεχνολογία είναι διαθέσιμη για την ανάπτυξη αυτού. Αυτήν τη στιγμή συνεργαζόμαστε με τη Microsoft και την Intel για να διερευνήσουμε ορισμένες από τις τεχνολογίες που διαθέτουν, όσον αφορά το υλικό και το λογισμικό. Οραματιζόμαστε τη δυνατότητα χρήσης αυτής της τεχνολογίας για την αναγνώριση της νοηματικής γλώσσας και στη συνέχεια τη μετατροπή σε έξοδο ομιλίας και ήχου.

ΜΟΥ: Εργάζεστε ενεργά για την ανάπτυξη αυτής της τεχνολογίας αυτήν τη στιγμή;

Γιαν: Λοιπόν, υπήρχε ένας πελάτης που χρησιμοποιούσε το λογισμικό μας και πίστευε ότι θα ήταν υπέροχο αν μπορούσαμε να το τροποποιήσουμε έτσι ώστε τα άτομα με προβλήματα ακοής να μπορούν να το χρησιμοποιήσουν πραγματοποιείτε τηλεφωνικές κλήσεις από την εφαρμογή μας, για επικοινωνία χωρίς την ανάγκη της νοηματικής γλώσσας όταν είναι αυτοπροσώπως ή χωρίς την ανάγκη υπηρεσίας τύπου TTY για τηλέφωνο κλήσεις. Αναπτύξαμε αυτό το προϊόν και με χρηματοδότηση από τη Microsoft και την Intel, ξεκινήσαμε το SpeechTrans για άτομα με προβλήματα ακοής στα Windows 8.1, γεγονός που αφαιρεί την ανάγκη για νοηματική γλώσσα.

ΜΟΥ: Πώς λειτουργεί η "προσωπική" εφαρμογή;

Γιαν: Υπάρχει λειτουργία ακρόασης και υπάρχει λειτουργία εισαγωγής. Έτσι, όταν κάποιος σας μιλάει, ενεργοποιείτε τη λειτουργία ακρόασης και πληκτρολογεί οτιδήποτε λέει στην οθόνη με κείμενο. Στη συνέχεια, όταν απαντάτε, το πληκτρολογείτε και μετά μιλά δυνατά τι πληκτρολογείτε. Με το τηλέφωνο, απλώς καλείτε τον αριθμό τηλεφώνου οποιουδήποτε ατόμου και όταν απαντά στο τηλέφωνο, γίνεται σαν ένα άμεσο μήνυμα. Ό, τι κι αν μιλάνε, παίρνεις ως IM. Στη συνέχεια, ό, τι πληκτρολογείτε εκφωνείται δυνατά μέσω του τηλεφώνου. Αυτή είναι η πρώτη φάση.

Near Future Sign Language Μετάφραση

ΜΟΥ: Ποιες τεχνολογίες μπορούν να περιμένουν οι άνθρωποι να δουν στο εγγύς μέλλον; Ποια είναι η επόμενη φάση;

Γιάννης: Οραματιζόμαστε - για κάποιον που έχει μόνο τη δυνατότητα να χρησιμοποιεί νοηματική γλώσσα - να μπορεί να το κάνει μπροστά από μια συσκευή όπως τηλέφωνο, υπολογιστή ή φορητό υπολογιστή. Η Intel διαθέτει ένα νέο σύστημα κάμερας και η Microsoft το κάνει επίσης με το Kinect, το οποίο κάνει αναγνώριση χειρονομίας.

ΜΟΥ: Πώς είναι καλύτερο από την ιδέα της μπάντας που έθεσαν οι μαθητές των Berghs;

Γιαν: Βασικά, το δικό μας πρόκειται να λειτουργήσει με τρόπο που δεν απαιτεί από εσάς να βάλετε τίποτα στο χέρι σας. Θα αναγνωρίσει 64 πόντους στο χέρι σας. Χρησιμοποιούμε την έκδοση beta της κάμερας RealSense της Intel. Επομένως, όχι μόνο θα μπορέσουμε να αναγνωρίσουμε όλη τη νοηματική γλώσσα και πολλές διαφορετικές διαλέκτους της νοηματικής γλώσσας, αλλά και εμείς μπορείτε επίσης να αναγνωρίσετε συναισθήματα, εκφράσεις του προσώπου και άλλες μικρές αποχρώσεις και στη συνέχεια να το μετατρέψετε σε προφορικές λέξεις ως Καλά.

Αυτό δεν θα απαιτήσει να φοράτε γάντια ή οτιδήποτε άλλο. Εστιάζουμε σε αυτήν την αγορά ειδικά επειδή θέλουμε να βοηθήσουμε τους ανθρώπους γενικά. Δεν θέλουμε μόνο να βοηθήσουμε άτομα που θέλουν να μιλήσουν σε πολλές διαφορετικές γλώσσες, αλλά θέλουμε επίσης να βοηθήσουμε άτομα που δεν μπορούν να μιλήσουν σε καμία γλώσσα. Η τεχνολογία υπάρχει και δεν υπάρχει λόγος η ποιότητα ζωής τους να είναι διαφορετική από τη δική μας.

Γιάννης: Είναι μια εφικτή ιδέα. Είναι απλώς μια διαφορετική είσοδος και έξοδος. Ορισμένες από τις συνομιλίες που είχαμε με τη Microsoft σχετικά με ορισμένες μελλοντικές τεχνολογίες είναι πού κάποιος θα μπορούσε στην πραγματικότητα να εμφυτεύσει ένα μικροτσίπ στο λαιμό του, και διαβάζει άμεσα το μυαλό του μοτίβα. Επομένως, εάν βοηθάτε άτομα που δεν μπορούν να επικοινωνήσουν, θα δούμε κάτι σαν αυτό ως ανάπτυξη της τρίτης φάσης.

Πέρυσι, υπήρχε μια ομάδα μαθητών που βγήκαν με ένα λειτουργικό πρωτότυπο ενός γαντιού που ήταν συνδεδεμένο σε έναν υπολογιστή. Οι χειρονομίες που κάνατε με το γάντι θα αναγνωριστούν και θα μετατραπούν σε νοηματική γλώσσα. Έτσι έχουν ήδη την ικανότητα με την τρέχουσα τεχνολογία.

Το όραμά μας είναι ότι δεν θέλουμε πραγματικά να δημιουργήσουμε τα αξεσουάρ όπως τα μπράτσα που πρέπει να φορέσετε. Θα πρέπει απλώς να είναι φυσικό και ελεύθερο για αυτούς [άτομα που κάνουν νοηματική γλώσσα] να το κάνουν μπροστά από τη βιντεοκάμερα τους. Το 90% αυτών που λένε οι άνθρωποι στην επικοινωνία είναι στην πραγματικότητα η γλώσσα του σώματός τους. Έχοντας πρόσβαση στην αναγνώριση προσώπου, τις χειρονομίες και τα συναισθήματα, θα μπορούμε να χρησιμοποιήσουμε αυτά τα δεδομένα ως για να βεβαιωθείτε ότι η μετάφραση και αυτό που προσπαθούν να μεταφέρουν εκφράζεται στα δεξιά μορφή.

ΜΟΥ: Είναι η Intel εντός της πενταετίας που διαθέτει αυτήν την τεχνολογία αναγνώρισης νοηματικής γλώσσας;

Γιάννης: Η Intel έχει σίγουρα πολλούς διαθέσιμους πόρους. Η τεχνολογία και το λογισμικό τους έρχονται με ρυθμό όπου μπορούμε να κάνουμε αυτό να συμβεί αρκετά γρήγορα.

ΜΟΥ: Έχετε ένα χρονικό πλαίσιο για το πότε ελπίζετε να εισαγάγετε αυτήν την τεχνολογία στην αγορά;

Γιάννης: Για τη νοηματική γλώσσα, είναι περίπου 12 έως 18 μήνες.

ΜΟΥ: Υπάρχει κάποιος άλλος εκεί έξω για μετάφραση νοηματικής γλώσσας;

Γιάννης: Είδα ένα βίντεο στο YouTube της IBM να κάνει ένα πρωτότυπο όπου κάποιος έκανε νοηματική γλώσσα, αλλά ήταν μια απόδειξη της έννοιας και είχε μόνο τρεις ή τέσσερις λέξεις που αναγνώρισε. Έχουμε πάνω από πεντακόσιες χιλιάδες λέξεις με τις οποίες σκοπεύουμε να το αναπτύξουμε, οπότε πρόκειται να το μεταφέρουμε σε ένα άλλο επίπεδο.

συμπέρασμα

Ενώ το όραμα που ονειρεύονταν οι μαθητές στο Berghs ενδέχεται να μην γίνει η εφαρμογή μετάφρασης νοηματικής γλώσσας του μέλλοντος, αυτό δεν σημαίνει ότι μια τέτοια ιδέα δεν θα συμβεί. Αυτό που αποδεικνύεται από το έργο SpeechTran, Intel και Microsoft είναι ότι η μετάφραση νοηματικής γλώσσας είναι σχεδόν βέβαιο ότι θα γίνει μια πραγματική τεχνολογία μέσα σε λίγα χρόνια. Πιθανότατα δεν θα περιλαμβάνει περίπλοκες μπάντες, αλλά αντί για τίποτα περισσότερο από μια ειδική βιντεοκάμερα και μια εφαρμογή για κινητά.

Μέσα από τη μαγεία της χειρονομίας και της αναγνώρισης προσώπου, αυτή η εφαρμογή μετάφρασης νοηματικής γλώσσας του μέλλοντος υπόσχεται να φέρει επανάσταση στις διαπροσωπικές επικοινωνίες για εκατοντάδες χιλιάδες άτομα με προβλήματα ακοής 5 καλύτεροι πόροι για χρήστες συσκευών Mac & Apple με αναπηρίες Διαβάστε περισσότερα ή άτομα με προβλήματα ακοής σε όλο τον κόσμο.