(相關(guān)資料圖)
阿利坎特大學(xué)(UA)機(jī)器人和三維視覺小組(RoViT)設(shè)計(jì)了第一個(gè)能夠?qū)崟r(shí)識(shí)別和解釋西班牙手語(yǔ)字母表(縮寫為L(zhǎng)SE)的應(yīng)用程序。
該應(yīng)用程序名為Sign4all,是一項(xiàng)突破,有助于打破聾人和健聽人在日常情況下(例如去看醫(yī)生或在餐廳吃飯)之間的溝通障礙。西班牙國(guó)家統(tǒng)計(jì)局(INE)最新發(fā)布的《殘疾、個(gè)人自主權(quán)和依賴狀況調(diào)查》顯示,西班牙有123萬(wàn)人患有不同類型和程度的聽力障礙。其中,有27,300人使用手語(yǔ)進(jìn)行交流。
由于使用了不同的計(jì)算機(jī)視覺和深度學(xué)習(xí)技術(shù),博士。計(jì)算機(jī)工程師和UA研究員EsterMartínez,以及博士。學(xué)生弗朗西斯科·莫里拉斯(FranciscoMorillas)開發(fā)了這種低成本工具,以便能夠在無(wú)法獲得口譯員協(xié)助時(shí)為聾人提供幫助。
Sign4all在提取手臂和手部骨骼的細(xì)節(jié)后,將身體的左側(cè)編碼為藍(lán)色,右側(cè)編碼為紅色,始終保持用戶的匿名性。從這一刻起,該應(yīng)用程序會(huì)實(shí)時(shí)翻譯聾人使用的手勢(shì),并朝相反的方向。它能夠使用虛擬化身來(lái)簽署由健聽人鍵入的西班牙語(yǔ)單詞。這個(gè)想法是,整個(gè)過(guò)程可以通過(guò)下載應(yīng)用程序并使用手機(jī)或平板電腦本身的相機(jī)來(lái)完成,這樣就可以在任何地方使用,正如Martínez所解釋的那樣。
根據(jù)UA研究人員的說(shuō)法,經(jīng)過(guò)多次測(cè)試,Sign4all設(shè)法以80%的準(zhǔn)確度解釋和識(shí)別LSE字母表。盡管這個(gè)結(jié)果對(duì)應(yīng)于指紋學(xué)字母表,但他們正在研究一個(gè)版本,該版本具有屬于日常任務(wù)領(lǐng)域的特定詞匯表,他們可以在其中解釋完整的句子。
UA團(tuán)隊(duì)已經(jīng)對(duì)這個(gè)新系統(tǒng)進(jìn)行了數(shù)月的訓(xùn)練,引入了越來(lái)越多的標(biāo)志。從這個(gè)意義上講,與維戈大學(xué)西班牙語(yǔ)和手語(yǔ)研究小組(GRILES)進(jìn)行了合作,該小組在研究這種語(yǔ)言及其在不同地區(qū)的使用方面具有豐富的經(jīng)驗(yàn)。維戈大學(xué)正在與口譯員一起收集圖像,UA正在處理所有這些數(shù)據(jù)。這樣,LSE識(shí)別和解釋系統(tǒng)的詞匯可以更快地得到改進(jìn)和擴(kuò)展。
關(guān)鍵詞: 應(yīng)用程序 西班牙語(yǔ) 提供幫助