參賽團隊名稱:
2019年開始,台灣開始重視手語的普及和數位化程度,本團隊運用 Machine Learning 和 Computer Vision 技術開發的AI手語翻譯APP,精準追蹤手勢特徵、基本手型、位置移動(延長、頻率、強度),準確翻譯的涵義,減少聾啞人士與一般人的隔閡,進而推廣手語的文化。
提案動機
巔峰時期疾管署每天下午兩點的記者會是民眾快速有效取得防疫資訊的重要管道,而同一時間在網路上爆紅的,除了阿中部長,還有部長身後那些默默地、極其重要的手譯員們。
手譯員的存在是為了落實聽障朋友的資訊權,這不是一種社會福利,而是「人權保障」。然而全台約12.4萬聽覺障礙人口中,使用台灣手語的人口粗估只有2到3萬。那剩下的聽障朋友該如何即時取得防疫資訊?
解決方案
軟體開發平合:Raspbian + ROS + OpenVINO
成果介紹短片:
成果介紹
使用者可以在鏡頭前透過手語進行溝通,然後系統用圖像識別技術,分析手指和手臂等身體幾個部位的骨骼運動,將手勢進行翻譯,顯示在我們的APP上,使得交流更加順暢,不過我們的系統還有很大的改進空間,目前,它只能準確地將手勢翻譯成大約2000個單詞,另外,目前我們的APP只能做到單向溝通,要如何反過來將環境中的口語資訊化為文字或手語讓聽障者接收也很困難。
本團隊期望透過此APP協助聾啞人士覺察自己的能力與特質,協助其建立自己的自信心、降低職場人際互動的阻礙,讓其在職場中遭遇的問題與狀況能夠更迅速分享並獲得解決。
參考資料:
社團法人中華民國聽障人協會
http://www.cnad.org.tw/ap/news_view.aspx?bid=25&sn=35ef3d27-4e95-4116-a45d-74e76ece9998
人權公約施行監督聯盟Covenants Watch
https://covenantswatch.org.tw/
蔡進發,2017,《 諾貝爾大師的世界觀 》,台北:遠見天下文化出版股份有限公司