https://frosthead.com

Ta nosljiva naprava prevodi znakovni jezik v angleščino

Približno 500.000 Američanov uporablja ameriški znakovni jezik (ASL). Za gluhe uporabnike ASL-a je lahko izziv komunikacija s tistimi, ki ne govorijo jezikov. Čeprav se večina gluhih Američanov nauči govornega jezika z govorno terapijo, se nekateri še vedno težko razumejo ustno ali preprosto najdejo znakovni jezik bolj tekočo obliko izražanja.

Zdaj so raziskovalci na teksaški univerzi A&M razvili nosljivo napravo, ki znakovni jezik "prevaja" v angleščino s pomočjo zaznavanja uporabnikovih gibanj. Naprava, ki je še v fazi prototipa, lahko prepozna 96 znakov ASL z 96-odstotno natančnostjo.

Sistem uporablja dva senzorja. Eden od njih je senzor gibanja z merilnikom pospeška in žiroskopom, ki meri hitrost in kot roke roke in roke. Če zaznate, kje so roke in roke uporabnika, se lahko začne ugibati, katero besedo morda podpisuje. Potem je tu še elektromiografski senzor, ki meri električni potencial gibanja mišic. Natančno lahko pove, kateri del rok in prstov se premika, kar je kritično.

"Če pogledate besedišče ameriškega znakovnega jezika, obstajajo primeri, ko se roka sama premika in potem imate zelo fino zrnato gibanje prstov, " pravi Roozbeh Jafari, inženir, ki je vodil projekt. "Če jih želite zaznati, ne boste mogli uporabljati samo gibanja roke."

Na primer, beseda "prosim" v ASL vključuje kroženje nad prsmi z odprto roko. Beseda "oprosti" uporablja identično gibanje, vendar je roka zaprta v pest.

Senzorji se nosijo na desnem zapestju uporabnika. Zbrane informacije po Bluetooth pošljejo prenosniku. Ta prenosnik vodi algoritem za razlago znaka in na zaslonu prikaže besedo v angleščini.

Sčasoma Jafari upa, da bo izničil potrebo po prenosniku, tako da v napravo vključi majhen računalnik. Računalnik lahko nato pošlje angleške besede na telefon druge osebe, tako da lahko preberejo, kaj pravi njihov partner za pogovor.

Očitno bo prevajalec moral biti usposobljen za veliko več znakov kot 40, da bo uspešen izdelek. Medtem ko je na stotine znakov ASL, je bilo prvotnih 40 znakov izbranih, ker so pogosti in uporabni, pravi Jafari. Oseba jih lahko uporabi, da izgovori preproste, ključne stavke, kot je »Potrebujem vodo.« Naprava bo prav tako morala postati hitrejša - zdaj morajo uporabniki pavze ustaviti med besedami, da imajo čas za prevajanje.

"V resnici ljudje ne govorijo tako, " pravi Jafari.

Vendar je ta naprednejši sistem po njegovih besedah ​​način, ki bo nadaljeval in bo vključeval več dela in financiranja.

Prejšnje tehnologije prevajanja ASL so za branje gibov uporabljale kamere. Ampak ti ne delujejo dobro v slabih svetlobnih pogojih, pravi Jafari. Poleg tega mnogim ljudem ni všeč ideja, da bi jih ves čas spremljala kamera.

V zadnjih letih so bile ustvarjene številne druge tehnologije za pomoč gluhim in naglušnim ljudem, da komunicirajo med seboj. Aplikacija, imenovana Transcense, ki je izšla lani, prevaja govor več ljudi v pisne besede in jih na zaslonu predstavlja z barvno označenimi mehurčki. Namenjen je pomagati gluhim ljudem na sestankih ali v socialnih situacijah, kjer je več govornikov lahko izziv tudi za najbolj izkušene bralce ustnic. Drugo podjetje, MotionSavvy, deluje na tabličnem računalniku, ki razlaga predloge ASL in besede bere na glas v angleščini. Na Kitajskem so raziskovalci uporabili Microsoftovo opremo za zaznavanje gibanja Kinect za prevajanje kitajskega jezika v govorjene in pisane besede.

Kot nekdo, ki že dolgo sodeluje z nosljivimi tehnologijami, kot so ure, ki spremljajo srčni ritem, Jafari razume pomen udobja in estetike. Če je naprava neprijetna in vsiljiva, je ljudje ne bodo nosili. Trenutni prototip naprave za prevajanje znakovnega jezika je videti kot medicinski pripomoček z elektrodami in trakovi in ​​žicami. Jafari bi rad, da je končna različica majhna in privlačna.

"Želim si, da se celoten sistem prilagodi uri, " pravi.

Ta nosljiva naprava prevodi znakovni jezik v angleščino