Bo aplikacija za prevod znakov že kdaj postala resničnost?

Oglas

Predstavljajte si svet, v katerem ni ovir med gluhimi in posluhom. Svet, kjer pogovori tečejo med tistimi, ki slišijo zvok, in tistimi, ki ne. Ali bi lahko ta svet v bližnji prihodnosti postal resničen?

Junija je skupina študentov marketinga na Berghs School of Communication razvila idejni video za izmišljeni izdelek z imenom Google Gesture. Izdelek je vseboval nosljiv zapestni pas in mobilno aplikacijo, ki je z elektromiografijo brala mišične gibe gluhe osebe, ki dela znakovni jezik. Sistem je nato te signale poslal aplikaciji, ki je te signale prevedla v digitaliziran glas in bi govorila za osebo.

Gledanje ponarejenega marketinškega videa je bilo precej razburljivo. V resnici je tako navdušujoče, da so velika tehnološka spletna mesta, kot so Mashable, Slashgear in drugi, izdelek prvotno razglasila za resničnega, nato pa so morali zahtevek ponovno navesti in se opravičiti za svojo napako. Bila je nenavadna napaka, če upoštevamo, da res obstaja je Googlov izdelek z imenom Google Gesture Search [No Longer Available], ki vam omogoča risanje gibov na zaslonu mobilnega telefona za iskanje stikov, zaznamkov in še več.

Ne glede na to je koncept Berghsovih študentov predstavil izjemno idejo, kar je povzročilo vprašanje - ali bi bilo mogoče ustvariti takšno aplikacijo zares?

Ali je možno prevajanje znakovnega jezika?

Če sesekljamo trženjski koncept na tehnični ravni, razkrijemo, da tehnologija, ki uporablja elektromiografijo (EMG) za "smiseln" znakovni jezik, sploh ni tako zelo uspešna. V letu 2009 raziskovalci z univerze v Washingtonu so lahko uporabili več senzorjev EMG za dekodiranje mišic in jih pretvorili v dejanske kretnje rok.

Raziskovalci so pravzaprav zgradili popolno "knjižnico za prepoznavanje kretnje", ki je opredelila, kateri mišični signali predstavljajo katero gesto. Raziskava dokazuje, da je tovrstna tehnologija na voljo in pripravljena za uporabo v takšni aplikaciji, kot so si jo zamislili Berghsovi študenti.

Je to še kdo dejansko izvedel? Če ne, zakaj tega nihče ne počne in gluhim in naglušnim osebam omogoči, da z znakovnim jezikom komunicirajo s komerkoli na svetu?

Prihodnost tehnologije prevajanja v realnem času

Resnica je, da nekdo dejansko dela takšno tehnologijo prevajanja jezikov v realnem času.

Obstaja podjetje, ki se imenuje SpeechTrans [Odstranjen URL je odstranjen], ki je pritiskalo na omejitve prevajalske tehnologije Pozabite na Google Translate: 3 načine za natančen, hiter prevodNe glede na to, ali se nameravate prijaviti za službo ali stanovanje v tujini ali želite prevesti spletno stran, morate stvari urediti tudi s tujim jezikom. Preberi več V preteklih letih. SpeechTrans sodeluje s tehnološkimi partnerji pri izdelavi nekaterih najpomembnejših storitev prevajanja jezikov v realnem času na trgu danes. To so storitve, ki besedilni klepet prevajajo v besedilni klepet, glasovno v besedilo in celo v realnem času prevajanje jezika v govor prek mobilnega telefona in namiznih aplikacij.

Da bi raziskali, ali bi tehnologija znakovnih jezikov v bližnji prihodnosti lahko postala resničnost, se je MakeUseOf usedel z izvršnim direktorjem SpeechTransa Johnom Freijem in direktorjem direktorja Yan Auerbachom, da bi razpravljali o tej prelomni novi prevajalska tehnologija Razumejte kateri koli jezik s temi petimi spletnimi stranmi za prevajanjeTehnologija je svet naredila manjše mesto. Ljudje iz vseh delov tega planeta uporabljajo več istih orodij, obiskujejo nekaj istih spletnih strani in se mešajo v različnih spletnih klepetalnicah. V ... Preberi več in samo, kako daleč bo v prihodnost.

Razvoj aplikacije za prevod znakovnega jezika

MUO: Ali je možno izvesti tak jezik znakov za prevajanje govora, ki so ga Berghsovi študenti upodobili v tem video konceptu Google Gesture?

John: Rekel bi, da je za to na voljo tehnologija. Trenutno sodelujemo z Microsoftom in Intelom pri raziskovanju nekaterih tehnologij, s katerimi se pojavljajo, na področju strojne in programske opreme. Predvidevamo možnost uporabe te tehnologije za prepoznavanje znakovnega jezika in nato pretvorbo v govor in zvok.

MUO: Trenutno aktivno delate na razvoju te tehnologije?

Yan: Torej, obstajala je stranka, ki je uporabljala našo programsko opremo, in je mislila, da bi bilo čudovito, če bi jo lahko prilagodili tako, da jo bodo ljudje z okvaro sluha lahko uporabljali za telefonske klice iz naše aplikacije, za komunikacijo brez osebnega jezika, kadar so osebno ali brez potrebe po TTY storitvi za telefon klici. Ta izdelek smo razvili in s finančnimi sredstvi Microsofta in Intel smo zagnali SpeechTrans za slušne težave v sistemu Windows 8.1, ki odpravlja potrebo po znakovnem jeziku.

MUO: Kako deluje aplikacija "osebno"?

Yan: Obstaja način poslušanja in način vnosa. Ko nekdo z vami nagovarja, preklopite na način poslušanja in na besedilo vtipkate vse, kar pišejo na zaslonu. Ko se odzovete nazaj, ga vtipkate in nato na glas izgovori, kar vtipkate. S telefonom samo pokličete telefonsko številko katere koli osebe, in ko se oglasi na telefonu, postane kot takojšnje sporočilo. Karkoli govorijo, dobite kot UI. Potem, karkoli vtipkate, glasno izgovorite po telefonu. To je prva faza.

Prevajanje v bližini prihodnjega znakovnega jezika

MUO: Katere tehnologije lahko ljudje pričakujejo v bližnji prihodnosti? Kaj je naslednja faza?

John: Predvidevamo, da lahko to stori pred nekom, ki ima samo možnost uporabe znakovnega jezika, pred napravo, kot so telefon, računalnik ali prenosnik. Intel ima nov sistem kamer, Microsoft pa enako kot tudi Kinect, ki prepoznava geste.

MUO: Kako je to bolje od koncepta pasu, ki so ga predstavili Berghsovi študenti?

Yan: V bistvu bo naše delovalo tako, da od vas ne bo treba ničesar postaviti na roko. Na roki boste prepoznali 64 točk Uporabljamo beta različico Intelove kamere RealSense. Tako ne samo, da bomo lahko prepoznali ves znakovni jezik in več različnih narečjev znakovnega jezika, ampak bomo biti sposoben prepoznati čustva, izraze obraza in druge majhne odtenke in jih nato pretvoriti v govorjene besede kot dobro.

Zaradi tega ne boste potrebovali nobenih rokavic ali česar koli. Na ta trg se osredotočamo posebej, ker želimo na splošno pomagati ljudem. Ne želimo samo pomagati ljudem, ki želijo govoriti v različnih jezikih, ampak tudi ljudem, ki ne znajo govoriti v nobenem jeziku. Tehnologija obstaja in ni razloga, da bi bila njihova kakovost življenja drugačna od naše.

John: To je izvedljiv koncept. To je samo drugačen vhod in izhod. Nekaj ​​pogovorov, ki smo jih imeli z Microsoftom o nekaterih prihodnjih tehnologijah, je kje nekdo bi jim dejansko lahko vsadil mikročip v vrat in ta mu direktno bere možganski valovanje vzorci. Če torej pomagate ljudem, ki ne morejo komunicirati, bi kaj takega dejansko videli kot uvedbo tretje faze.

Lani je bila skupina študentov, ki je izšla z delujočim prototipom rokavice, ki je bila vtaknjena v računalnik. Poteze, ki ste jih naredili z rokavico, bi nato prepoznali in pretvorili v znakovni jezik. Torej že imajo zmogljivosti s trenutno tehnologijo.

Naša vizija je, da v resnici ne želimo ustvariti dodatkov, kot so pasovi za roke, ki jih morate obleči. To bi moralo biti naravno in brez pretoka, da bi to (ljudje, ki delajo znakovni jezik), storili pred svojo video kamero. 90% tega, kar ljudje govorijo v komunikaciji, je dejansko v njihovi govorici telesa. Če bomo lahko dostopali do prepoznavanja obraza, kretnic in čustev, bomo te podatke lahko uporabili kot dobro, da se prepričate, da je prevod in tisto, kar poskušata prenesti, izraženo v desni oblika.

MUO: Ali je Intel v petih letih uporabe tehnologije prepoznavanja znakov?

John: Intel ima zagotovo na voljo veliko virov. Njihova tehnologija in njihova programska oprema se pojavljata s hitrostjo, kjer lahko to dosežemo dokaj hitro.

MUO: Ali imate časovni okvir, ko želite uvesti to tehnologijo na trg?

John: Za jezik znakov je približno 12 do 18 mesecev.

MUO: Ali ima še kdo zunaj kaj takega za prevod znakovnega jezika?

John: Videla sem, da je v YouTubovem videoposnetku IBM delal prototip, kjer nekdo dela znakovni jezik, vendar je bil dokaz koncepta in je imel le tri ali štiri besede, ki jih je prepoznal. Imamo več kot petsto tisoč besed, ki jih nameravamo uvesti, tako da jih bomo prenesli na povsem drugo raven.

Zaključek

Čeprav vizija, o kateri so sanjali študenti na Berghsu, morda ne bo postala prihodnost aplikacija za prevajanje znakovnega jezika, to še ne pomeni, da se tak koncept ne bo zgodil. Kar delajo pri SpeechTranu, Intel in Microsoft, dokazuje, da je prevajanje v znakovni jezik skoraj zagotovo postalo prava tehnologija v samo nekaj letih. Najverjetneje ne bo vključeval okornih pasov rok, namesto tega pa nič drugega kot posebno video kamero in mobilno aplikacijo.

Ta čarobna aplikacija za prevajanje prihodnosti s čarobno kretnjo in prepoznavanjem obraza obljublja, da bo popolnoma spremenila medosebne komunikacije za več sto tisoč slaboviden 5 najboljših virov za Mac in Apple uporabnike naprav s posebnimi potrebami Preberi več ali naglušni posamezniki po vsem svetu.