Stane se překladová aplikace znakového jazyka někdy realitou?

Představte si svět, kde jsou odstraněny bariéry mezi hluchým a sluchem. Svět, kde rozhovory plynou plynule mezi těmi, kteří slyší zvuk, a těmi, kdo to ne. Mohl by se tento svět v brzké budoucnosti stát skutečností?

V červnu skupina marketingových studentů na Berghs School of Communication vyvinula koncepční video pro fiktivní produkt nazvaný Google Gesture. Produkt zahrnoval nositelnou náramkovou pásku a mobilní aplikaci, která používá elektromyografii ke čtení svalových pohybů neslyšící osoby, která dělá znakový jazyk. Systém poté tyto signály předal aplikaci, která tyto signály přeložila do digitalizovaného hlasu a mluvila za osobu.

Sledování falešného marketingového videa bylo docela vzrušující. Ve skutečnosti je tak vzrušující, že hlavní technologické weby, jako je Mashable, Slashgear a další, původně ohlásily produkt jako skutečný, a později musely tento požadavek přepočítat a omluvit se za chybu. Byla to podivná chyba, když jsem to vzal v úvahu je produkt Google s názvem Google Gesture Search [No Longer Available], který vám umožňuje nakreslit gesta na mobilní obrazovku a hledat kontakty, záložky a další.

Bez ohledu na to, koncept studentů Berghs představil pozoruhodný nápad, který vedl k otázce - mohlo by být možné vytvořit takovou aplikaci pro skutečné?

Je možný překlad znakového jazyka?

Rozšíření marketingového konceptu na technické úrovni ukazuje, že technologie využívající elektromyografii (EMG) na “smysl” znaková řeč není vůbec tak přitažená. Již v roce 2009 dokázali vědci z Washingtonské univerzity použít více snímačů EMG k dekódování pohybů svalů a jejich přeměně na skutečná gesta rukou a rukou.

Vědci vlastně postavili komplet “knihovna rozpoznávání gest”, identifikovat, které svalové signály představovaly které gesto. Výzkum dokazuje, že tento druh technologie je k dispozici a je připraven k implementaci do takové aplikace, kterou si Berghs studenti představili.

Takže to někdo skutečně dosáhl? Pokud ne, proč to nikdo neudělá a neslyšícím a sluchově postiženým umožňuje komunikovat s kýmkoli na světě znakovým jazykem?

Budoucnost překladatelské technologie v reálném čase

Pravda je, že někdo ve skutečnosti pracuje na takové technologii překladu znakového jazyka v reálném čase.

Existuje společnost s názvem SpeechTrans, která v posledních letech posouvá hranice překladatelských technologií. 3 Nejlepší překladové nástroje založené na Google Translate. SpeechTrans spolupracuje s technologickými partnery na výrobě některých z nejpozoruhodnějších překladatelských služeb v reálném čase na současném trhu. Jedná se o služby, které překládají textový chat na textový chat, hlas na text a dokonce i překlad jazyků hlas-to-real v reálném čase prostřednictvím mobilních telefonů a stolních aplikací..

Aby prozkoumala, zda by se technologie znakového jazyka mohla v brzké době stát realitou, se MakeUseOf posadil s generálním ředitelem SpeechTrans Johnem Freim a COO Yanem Auerbachem, aby prodiskutovali tuto průkopnickou novou překladatelskou technologii Porozuměli jakémukoli jazyku s těmito 5 webovými stránkami Překlady jazyků 5 Webové stránky pro překlad jazyků Technologie učinila svět menším místem. Lidé ze všech částí této planety používají mnoho stejných nástrojů, navštěvují některé stejné webové stránky a kombinují různé chatovací místnosti online. … A jak daleko do budoucnosti to může být.

Vývoj aplikace pro překlad znakového jazyka

MUO: Je možné udělat takový překlad znakového jazyka do řeči, který Berghovi studenti vykreslili v tomto koncepčním videu Gesta Google?

John: Řekl bych, že tato technologie je k dispozici. V současné době spolupracujeme se společnostmi Microsoft a Intel na průzkumu některých technologií, se kterými přicházejí, pokud jde o hardware a software. Představujeme si schopnost použít tuto technologii k rozpoznání znakového jazyka a poté jej převést na řeč a zvukový výstup.

MUO: Momentálně aktivně pracujete na vývoji této technologie?

Yan: Takže existoval zákazník, který používal náš software, a domníval se, že by bylo skvělé, kdybychom ho mohli upravit tak, aby jej mohli lidé se sluchovým postižením používat k telefonování z naší aplikace, ke komunikaci bez nutnosti podepisování jazyk, když jsou osobně nebo bez potřeby služby typu TTY pro telefonní hovory. Tento produkt jsme vyvinuli a s podporou společností Microsoft a Intel jsme spustili SpeechTrans pro sluchově postižené v systému Windows 8.1, což odstraňuje potřebu znakového jazyka.

MUO: Jak to funguje? “osobně” aplikace práce?

Yan: Existuje režim poslechu a režim vstupu. Takže, když s vámi někdo mluví, přepnete se do režimu poslechu a do textu se vypíše vše, co na obrazovce říkají. Poté, když odpovíte zpět, napíšete to a pak to nahlas řekne, co píšete. S telefonem stačí vytočit telefonní číslo kterékoli osoby, a když přijme telefon, stane se to jako okamžitá zpráva. Ať už mluví cokoli, dostanete se jako IM. Poté, cokoli píšete, je nahlas vysloveno telefonem. To je první fáze.

Blízko Překlad budoucího znakového jazyka

MUO: Jaké technologie mohou lidé očekávat v blízké budoucnosti? Jaká je další fáze?

John: Předpokládáme - pro někoho, kdo má schopnost používat pouze znakový jazyk -, aby to dokázal před zařízením, jako je telefon, počítač nebo notebook. Intel má nový kamerový systém, a Microsoft také dělá s Kinectem, který rozpoznává gesta.

MUO: Jak je to lepší, než koncept skupiny paže předložený studenty Berghs?

Yan: V zásadě bude naše práce fungovat tak, že nebude vyžadovat, abyste si něco položili na paži. Rozpozná 64 bodů na vaší ruce. Používáme beta verzi kamery Intel RealSense. Nejenže dokážeme rozpoznat celý znakový jazyk a mnoho různých dialektů znakového jazyka, ale dokážeme také rozpoznat emoce, výrazy obličeje a další malé nuance a poté je převést na mluvená slova..

To od vás nebude vyžadovat žádné rukavice ani nic. Zaměřujeme se na tento trh konkrétně proto, že chceme lidem obecně pomáhat. Nechceme jen pomáhat lidem, kteří chtějí mluvit v mnoha různých jazycích, ale také chceme lidem, kteří neumí mluvit v žádném jazyce. Tato technologie existuje a neexistuje důvod, proč by se kvalita jejich života neměla lišit od té naší.

John: Je to proveditelný koncept. Je to jen jiný vstup a výstup. Některé z rozhovorů, které jsme vedli se společností Microsoft o některých budoucích technologiích, jsou situace, kdy si někdo může skutečně implantovat mikročip do krku a přímo čte jejich vzory mozkových vln. Pokud tedy pomáháte lidem, kteří nemohou komunikovat, skutečně bychom něco takového viděli jako nasazení třetí fáze.

V loňském roce vyšla skupina studentů, kteří přišli s fungujícím prototypem rukavice, která byla zapojena do počítače. Gesta, která jste udělali rukavicí, by pak byla rozpoznána a převedena do znakového jazyka. Takže již mají schopnost se současnou technologií.

Naše vize je, že opravdu nechceme vytvářet doplňky jako paže, které musíte obléknout. Mělo by pro ně být přirozené a volně plynout [lidé, kteří dělají znakový jazyk], aby to dělali před jejich videokamerou. 90% toho, co lidé říkají v komunikaci, je ve skutečnosti řeč těla. Budeme-li mít přístup k rozpoznávání obličeje, gestům a emocím, budeme moci tato data také použít, abychom zajistili, že překlad a to, co se snaží zprostředkovat, je vyjádřeno ve správné formě..

MUO: Je společnost Intel v rámci pětileté škály technologie rozpoznávání znakového jazyka?

John: Intel má rozhodně k dispozici mnoho zdrojů. Jejich technologie a jejich software se blíží tempem, kde můžeme dosáhnout toho, aby se to stalo docela rychle.

MUO: Máte časový rámec, kdy doufáte, že se tato technologie dostane na trh?

John: Pro znakovou řeč je to asi 12 až 18 měsíců.

MUO: Má někdo tam venku něco podobného pro překlad znakového jazyka?

John: Viděl jsem video YouTube společnosti IBM, které dělalo prototyp, kde někdo dělal znakovou řeč, ale byl to důkaz konceptu a měl jen tři nebo čtyři slova, která rozpoznal. Máme více než pět set tisíc slov, s nimiž se chystáme zavést, takže to vezme na úplně jinou úroveň.

Závěr

Přestože se vize, o níž se studenti v Berghsu snili, nemusí stát aplikací pro překlad do znakového jazyka budoucnosti, neznamená to, že takový koncept se nestane. Práce ve společnostech SpeechTran, Intel a Microsoft dokazují, že překlad znakového jazyka je téměř jistý, že se během několika let stane skutečnou technologií. Nejpravděpodobněji nebude zahrnovat těžkopádné paže, ale místo toho nic víc než speciální videokameru a mobilní aplikaci.

Díky magii gesta a rozpoznávání obličeje tato aplikace pro překlad znakového jazyka budoucnosti slibuje zcela revoluci mezilidské komunikace pro stovky tisíc sluchově postižených 5 nejlepších zdrojů pro uživatele počítačů Mac a Apple se zdravotním postižením 5 nejlepších zdrojů pro uživatele počítačů Mac a Apple s postižením nebo neslyšícími jedinci po celém světě.