紡織產(chǎn)業(yè)綜合研究所運(yùn)用早先研發(fā)的導(dǎo)電纖維,連結(jié)臺(tái)科大資工系研發(fā)手語(yǔ)演算法的能量,在本(2017)年3月初做出「手語(yǔ)翻譯手套」雛型,透過(guò)手機(jī)顯示或說(shuō)出聽(tīng)障者的意念,未來(lái)將結(jié)合VR進(jìn)攻外科醫(yī)學(xué)教育。
聽(tīng)障者彼此溝通都是使用手語(yǔ),但聽(tīng)障者與一般不懂手語(yǔ)的人溝通多少會(huì)有障礙,而這個(gè)障礙卻在紡綜所研發(fā)成熟的導(dǎo)電纖維與臺(tái)科大的手語(yǔ)演算法的學(xué)研結(jié)合下,意外的獲得化解。
紡織產(chǎn)業(yè)綜合研究所智慧型紡織品組長(zhǎng)沈乾龍表示,紡綜所早已用導(dǎo)電纖維做出并陸續(xù)發(fā)表觸控手套、控制遙控機(jī)和遙控車(chē)的手套;剛好今年2月臺(tái)科大資訊工程系副教授姚智塬得知紡織所的研究,于是雙方結(jié)合,很快地在3月初做出“手語(yǔ)翻譯手套”的雛型。
這個(gè)“手語(yǔ)翻譯手套”的雛型是手套的布料纖維取代傳統(tǒng)的電線,手背上有一個(gè)電子控制盒,控制盒用藍(lán)芽通訊與手機(jī)聯(lián)絡(luò),并與手語(yǔ)的云端資料結(jié)合,讓手機(jī)上出現(xiàn)聽(tīng)障者要表達(dá)的字辭。
沈乾龍解釋?zhuān)笆终Z(yǔ)翻譯手套”把手套變成舒適柔軟的傳輸介面,并偵測(cè)手語(yǔ)姿勢(shì)變化曲率、旋轉(zhuǎn)角度、揮動(dòng)角度、速度、方向,手背上的電子控制盒獲得參數(shù)再透過(guò)演算法,用藍(lán)芽功能傳輸給手機(jī),并連結(jié)手語(yǔ)的云端資料,手機(jī)便能顯現(xiàn)出聽(tīng)障者想要表達(dá)的字辭,或是「發(fā)聲說(shuō)話(huà)」。
姚智塬指出,目前團(tuán)隊(duì)僅初步先錄製30到40個(gè)字辭,未來(lái)第二階段團(tuán)隊(duì)還要花更多時(shí)間讓手語(yǔ)資料庫(kù)更豐富,提升云端資料庫(kù)的深度運(yùn)算,才能進(jìn)一步表達(dá)更多、更復(fù)雜的字辭意思;同時(shí)增加手套觸碰功能,以提升辨識(shí)準(zhǔn)確率。
姚智塬說(shuō),“手語(yǔ)翻譯手套”未來(lái)潛力非常大,除了造福聽(tīng)障者之外,未來(lái)勢(shì)必會(huì)結(jié)合虛擬實(shí)境(VR)技術(shù),進(jìn)攻醫(yī)療教育領(lǐng)域,特別是外科實(shí)習(xí)醫(yī)生的學(xué)習(xí)階段,可以先行錄製熟練的外科醫(yī)師的全套開(kāi)刀手勢(shì)和方法,讓實(shí)習(xí)醫(yī)生可充分練習(xí),縮短摸索錯(cuò)誤的時(shí)間,更真實(shí)的接觸各種不同病灶的開(kāi)刀方式,將基礎(chǔ)打得更扎實(shí)。
沈乾龍強(qiáng)調(diào),由于“手語(yǔ)翻譯手套”未來(lái)的應(yīng)用和潛力非常大,因此雙方已進(jìn)行下一步合作,由臺(tái)科大負(fù)責(zé)研發(fā)更精確的演算法,紡綜所將這種穿戴載具朝更舒適,接受度更高的方向再改良,同時(shí)還要讓電子訊號(hào)更精準(zhǔn),未來(lái)最快下半年會(huì)找上醫(yī)院和醫(yī)學(xué)院進(jìn)一步合作。