Kinect是一個潛力無限的設(shè)備，微軟亞洲研究院、中國科學(xué)院、北京聯(lián)合大學(xué)正在一起研究一個基于Kinect的手語翻譯系統(tǒng)，這是一個讓人聽得懂手語，幫助聽障人士改善生活質(zhì)量的技術(shù)。
10月31日消息，Kinect是一個潛力無限的設(shè)備，微軟亞洲研究院、中國科學(xué)院、北京聯(lián)合大學(xué)正在一起研究一個基于Kinect的手語翻譯系統(tǒng)，這是一個讓人聽得懂手語，幫助聽障人士改善生活質(zhì)量的技術(shù)。
該系統(tǒng)希望借助Kinect進行口語和手語的實時互譯。
聽障女孩現(xiàn)場Kinect手語翻譯系統(tǒng)與人交流
簡而言之，Kinect進行捕捉動作，之后靠機器學(xué)習(xí)和模式識別程序解析出這些動作的含義，Bing Translator技術(shù)則負(fù)責(zé)實際的翻譯工作。當(dāng)一個聾啞人用手語和一個說口語的正常人進行對話時，這套系統(tǒng)可以捕捉交談雙方的對話內(nèi)容，視覺型號被轉(zhuǎn)換成書面文字并朗讀出來，而口語則被實時翻譯并轉(zhuǎn)換成精準(zhǔn)的視覺信號。
這項研發(fā)以微軟研究院在翻譯和自然語言處理、語音和手勢識別等自然用戶界面領(lǐng)域的廣泛研究成果為基礎(chǔ)，并更進一步。多式輸入數(shù)據(jù)的應(yīng)用將突破先前單純依靠視覺輸入或語音數(shù)據(jù)的局限性。
這是一項偉大的成就，但這項研究還有很長的路要走。目前為止，研究人員僅僅添加了300個中國手語單詞，而中國手語的單詞總數(shù)越有4000個。
世界各地有3.6億的聽力障礙人士，而中國的聽力障礙患者人數(shù)有將近2100萬。每一天，他們都面臨著大多數(shù)人從來無需考慮也難以想象的溝通挑戰(zhàn)。如果該項目的研究成果能正式面世，將是聾啞患者發(fā)聲的新希望。
- 更多相關(guān)內(nèi)容
- 微軟研究讓人“聽”得懂手語的翻...
轉(zhuǎn)型的最終目的 -提質(zhì)降本增效
分享到微信 ×
打開微信，點擊底部的“發(fā)現(xiàn)”，
使用“掃一掃”即可將網(wǎng)頁分享至朋友圈。