[發明專利]一種中國普樂手語編碼的手勢動作識別方法

有效

• 申請號: 201910339115.6
• 申請日: 2019-04-25
• 公開（公告）號: CN110046603B
• 公開（公告）日: 2020-11-27
• 發明（設計）人: 成娟;魏馥琳;劉羽;陳勛;李暢;宋仁成
• 申請（專利權）人: 合肥工業大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06K9/62
• 代理公司: 安徽省合肥新安專利代理有限責任公司 34101
• 代理人: 陸麗莉;何梅生

本發明公開了一種中國普樂手語編碼的手勢動作識別方法，其步驟包括：1首先用攝像頭捕獲中國普樂手語編碼手勢動作視頻，得到分幀RGB圖像序列；2對每一幀圖像進行顏色空間轉換并確定手勢區域；3根據提取的手形邊緣輪廓點序列極小值確定擬合圓，并替代掌心區域，再檢測出指尖和指根；4以圓心和豎直向下的單位向量為標準，提取每個輪廓點的角度及距離特征；5采用動態時間規整算法對特征進行映射變換，獲取某一手勢的相似距離特征；6采用多種分類器對手語動作進行識別。本發明能有效識別中國普樂手語編碼手勢動作，為連續、大規模詞匯量的中國手語識別系統提供一種解決方案，同時對推廣規范的中國手語具有重要意義。

技術領域

本發明屬于中國手語手勢動作識別的技術領域，具體涉及一種中國普樂手語編碼的手勢動作識別方法，主要應用于手語識別系統和人機交互等相關領域。

背景技術

手勢動作是人機交互的一種重要輸入方式，以其豐富多變的含義、靈活的執行方式被應用于各種信息交流過程。手勢識別是指利用計算機來檢測、分析和解釋人所執行的手勢動作，如手臂、手腕、手指等的動作方式，用力大小,從而判斷動作意圖并提供相應的服務，手勢識別技術被廣泛應用于手語識別、康復訓練、人機交互、家電控制、智能汽車等領域。

手語是一種結構化和標準化的手勢動作集合，由手形動作、手勢位置、掌心朝向、運動軌跡以及面部表情和身體姿態等五大要素構成，其中手形動作是手語的核心要素。手語通過手勢的變化來模擬形象或者音節，從而構成特定的意思或詞語，能夠自然地表達出意思且具有較直觀的視覺效果，是聾啞人之間、或聾啞人與健聽人之間思想交流的一種重要方式。S碼PL型中國普樂手語是一種語言文字型手語，根據聾人看人說話口形和漢字的字音、字型特點約定而成，約定在口邊用左右手分別打出P型簡拼手語手勢拼出聲韻母，再在肩下左右兩邊分別打出表示字型的L型首尾部件碼手勢來區分同音字，涉及指上、指橫、指下3個方向的13類編碼手勢動作(Juan C,Xun C,Aiping L,et al.ANovel Phonology-andRadical-Coded Chinese Sign Language Recognition Framework Using Accelerometerand Surface Electromyography Sensors[J].Sensors,2015,15(9):23303-23324.葛遂元.中國手語兩派之爭解談[J].綏化學院學報,2012(3):20-26.)。中國普樂手語是一種標準規范的手語，有利于聾人建立漢語思維，在學會手語的同時學會查字、打字、注音等，而通過識別手語動作，將其結果用有聲或者文本的方式展現出來，有助于聾人和健聽人之間的交流。