蘇州學者團隊在《自然》子刊再發科研成果 實用手語可整句識别

蘇報訊（記者 袁藝）近日，新加坡國立大學蘇州研究院智慧醫療技術卓越研究中心進階研究員李正國團隊在國際頂尖學術期刊《自然·通訊》上發表科研成果。李正國團隊成功研發了一種基于摩擦電手套的手語識别和交流系統，該系統在人工智能的輔助下，不僅實作了普遍的多個手語單詞識别，還能對句子特别是未經人工智能訓練的新句子進行解析與翻譯，滿足語言、聽覺障礙者高頻率使用句子的日常交流需求，提高了手語識别系統的實用性。

李正國團隊研發的系統包括摩擦電傳感手套、深度學習子產品和使用者界面。作為示範，該系統實作了對50個單詞和20個句子的獨立識别，在非分割架構内，其準确率分别高達91.3%和95%。此外，為了克服無法識别未經訓練的新句子的局限，分割法将資料集内的句子信号劃分為單詞片段，深度學習模型則負責記憶所有出現過的單詞單元。同時在虛拟現實界面上，語言、聽力障礙者可以直接使用手語與非手語使用者進行互動，非手語使用者則能直接打字參與交流。“除了提升語言、聽力障礙者的社會參與程度，此項技術也可應用于殘障人士輔助裝置、醫療健康等領域，助力以人為本的物聯網建設。”李正國說。

【來源：蘇州日報】

版權歸原作者所有，向原創緻敬