https://frosthead.com

Овај носиви уређај преводи језик знака на енглески

Око 500.000 Американаца користи амерички језик знака (АСЛ). За глухе кориснике АСЛ-а комуникација са онима који течно не говоре језик може бити изазов. Иако већина Американаца са глухим родом учи говорни језик путем говорне терапије, неки још увек тешко могу да се усмено разумеју или једноставно пронађу језик знака течнији облик изражавања.

Сада су истраживачи са тексашког Универзитета А&М развили носив уређај који "преводи" језик знака на енглески језик осетивши кретања корисника. Уређај, још увек у фази прототипа, може препознати око 40 АСЛ знакова са 96-постотном тачношћу.

Систем користи два сензора. Један је сензор покрета са акцелерометром и жироскопом, који мери брзину и угао руке и руке корисника. Осјећајући где се налазе руке и руке корисника, може се почети нагађати коју ријеч може потписати. Ту је и електромиографски сензор који мери електрични потенцијал покрета мишића. Може тачно да каже који се део руку и прстију помера, што је критично.

„Ако погледате вокабулар америчког знаковног језика, постоје случајеви да се сама рука помера и тада имате врло фино зрнато кретање прстију“, каже Роозбех Јафари, инжењер који је водио пројекат. "Ако желите то открити, нећете моћи да користите само покрет руке."

На пример, реч „молим“ у АСЛ-у укључује прављење кругова преко груди отвореном руком. Реч "извини" користи идентичан покрет, али рука је затворена у песници.

Сензори се носе на десном зглобу корисника. Сакупљене информације шаљу се преко Блуетоотх-а на лаптоп. Овај лаптоп води алгоритам за тумачење знака и на екрану приказује реч на енглеском језику.

На крају, Јафари се нада да ће негирати потребу за лаптопом тако што ће мали рачунар уградити директно у уређај. Рачунар би тада могао да пошаље енглеске речи на телефон друге особе, како би могли да прочитају шта њихов партнер за разговор говори.

Очигледно је да ће преводилац такође морати да зна више далеко од 40 да би био одржив производ. Иако постоји на стотине АСЛ знакова, оригиналних 40 знакова изабрано је јер су уобичајени и корисни, каже Јафари. Особа их може користити за изговарање једноставних, пресудних реченица попут „треба ми вода.“ Уређај ће такође требати да убрза - управо сада корисници морају да праве паузе између речи како би имали времена за превод.

"У стварности људи не разговарају тако", каже Џафари.

Али, овај напреднији систем, каже он, представља начин на који треба нижи пут и укључиват ће више рада и финансирања.

Претходне АСЛ технологије превођења користиле су камере за читање гестова. Али они не раде добро у условима слабог осветљења, каже Јафари. Поред тога, многим људима се не свиђа идеја да их камера стално гледа.

Последњих година створене су бројне друге технологије које помажу да глуви и слушни људи комуницирају једни са другима. Апликација под називом Трансценсе, објављена прошле године, преводи говор више људи у писане речи и приказује их на екрану у бобицама обојеним у боји. Замишљено је да помогне глувим људима на састанцима или у друштвеним ситуацијама, где више говорника може бити изазов чак и најискуснијим читаоцима усана. Друга компанија, МотионСавви, ради на таблету који тумачи АСЛ предлоге и чита речи наглас на енглеском. У Кини, истраживачи су користили Мицрософтову опрему за откривање покрета Кинецт за превођење кинеског језика знакова у изговорене и писане речи.

Као неко ко дуго ради с носивим технологијама, попут сатова који прате ритам срца, Јафари схвата важност комфора и естетике. Ако је уређај неугодан и наметљив, људи га неће носити. Тренутни прототип уређаја за превођење на знаковни језик изгледа као медицински уређај, са електродама и каишима и жицама. Јафари би волео да коначна верзија буде мала и атрактивна.

"Желим да цео систем стане у сат", каже он.

Овај носиви уређај преводи језик знака на енглески