政大資管團隊手語語音辨識 掄元

國立政治大學之團隊獲資訊應用組第一名。圖／業者提供

聽障人士在生活中諸多不便，在疫情中因口罩的隔閡更爲突顯。在簡士鎰老師指導下，國立政治大學資管系曹子涵、朱芷伶、張鬱雯、宋志謙及謝承霖同學組隊參加「第27屆大專校院資訊應用服務創新競賽」，以「SignLens－手語語音辨識於混合實境應用」，協助金融業服務聽障人士更貼心，獲得資訊應用組二之第一名。

目前常見的手語翻譯軟體大多僅提供手語轉換文字的單向溝通，然而順暢的溝通不能單仰賴其中一方。

團隊成員曹子涵表示，尤其是金融或醫療場域，由於涉及隱私，場景特殊，並不在政府手語溝通補助範圍之內，但許多專有名詞應用及資訊不平等之情勢，常使聽障人士因溝通不順暢，導致個人權益損失。國外已有成功HoloLens2裝置，將手語及語音轉換成文字，即時協助聽障人士與聽人之間更順暢的雙向溝通，團隊將此一創意本土化，實測應用準確度已可達8成至8成5。

這是一場很盛大，很專業的競賽，團隊成員說，此次參與競賽的作品同時也是團隊畢業專題，最大的收穫是評審或其他老師的精闢見解，團隊得以從原本日常手語對話之空泛目標，變得更爲聚焦在金融場景，也瞭解不同產業應用開發時，應特別注意的問題，進一步精進畢業專題。尤其是在決賽的過程中，有機會看到同樣的技術，所發展出不同的新穎應用及看法，更多所啓發。

展望未來，希望透過訂閱服務，解決金融業聽障人士服務之痛點，將應用擴及醫療領域，甚至日常生活應用情境。