[發明專利]手勢處理方法、交互控制方法及設備

在審

• 申請號: 201811032593.4
• 申請日: 2018-09-05
• 公開（公告）號: CN109255324A
• 公開（公告）日: 2019-01-22
• 發明（設計）人: 冷芝瑩;盧楊;王平平;于洋;梁曉輝
• 申請（專利權）人: 北京航空航天大學青島研究院
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06F3/01
• 代理公司: 北京太合九思知識產權代理有限公司 11610
• 代理人: 劉戈

1.一種手勢處理方法，其特征在于，包括：

采集手部運動時的視頻數據，并獲取所述視頻數據中的目標圖像幀；

提取所述目標圖像幀中的手部特征；

利用手勢識別模型識別所述手部特征，獲得手勢信息；

確定手勢信息對應的控制命令；

確定手部預定部位在所述目標圖像幀的目標位置；

將所述目標位置映射至顯示屏幕，獲得對應的操作位置；其中，所述控制命令針對所述操作位置執行。

2.根據權利要求1所述的方法，其特征在于，所述采集手部運動時的視頻數據，獲取所述視頻數據中的目標圖像幀之后，還包括：

對所述目標圖像幀進行圖像分割，獲得手部所在區域的手勢圖像；

所述提取所述目標圖像幀中的手部特征包括：

提取所述手勢圖像中的手部特征；

所述確定所述手部預定部位在所述目標圖像幀中的目標位置包括：

基于所述手勢圖像，確定手部預定部位在目標圖像幀的目標位置。

3.根據權利要求2所述的方法，其特征在于，所述基于所述手勢圖像，確定手部預定部位在目標圖像幀的目標位置包括：

確定所述手部預定部位在所述手勢圖像中的檢測位置；

基于所述手勢圖像與所述目標圖像幀的分割關系，確定所述檢測位置在所述目標圖像幀中的目標位置。

4.根據權利要求2所述的方法，其特征在于，所述提取所述手勢圖像中的手部特征包括：

對所述手勢圖像進行顏色空間轉換，獲得目標轉換圖像；

提取所述目標轉換圖像中的手部特征。

5.根據權利要求3所述的方法，其特征在于，所述確定所述手部預定部位在所述手勢圖像中的檢測位置包括：

確定所述手部在所述手勢圖像中的封閉區域；

獲取所述封閉區域中至少一個指尖位置；

根據所述至少一個指尖位置，獲得所述手部預定部位在所述手勢圖像中的檢測位置。

6.根據權利要求5所述的方法，其特征在于，所述確定手部在所述手勢圖像中的封閉區域包括：

利用輪廓檢測算法，檢測所述手勢圖像中的至少一個輪廓；

確定所述至少一個輪廓中面積最大的目標輪廓；

確定所述目標輪廓對應區域為所述手部在所述手勢圖像封閉區域。

7.根據權利要求5所述的方法，其特征在于，所述獲取所述封閉區域中至少一個指尖位置包括：

利用凸缺陷檢測算法檢測所述封閉區域的輪廓對應的多個頂點；

根據所述多個頂點中任意兩個頂點的距離以及夾角對應關系，確定多個指尖點；

分別確定所述多個指尖點在所述封閉區域中的多個指尖坐標，獲得至少一個指尖位置。

8.根據權利要求7所述的方法，其特征在于，所述手部預定部位包括所述用戶手部的最高指尖點；

所述根據所述至少一個指尖位置，獲得所述手部預定部位在所述手勢圖像中的檢測位置包括：確定所述多個指尖坐標中的最高指尖點的坐標為所述手部預定部位在所述手勢圖像中的檢測位置。

9.根據權利要求4所述的方法，其特征在于，所述提取所述目標轉換圖像中的手部特征包括：

將所述目標轉換圖像進行高斯模糊去噪，獲得去噪圖像；

將所述去噪圖像轉換為二值圖像；

提取所述二值圖像中的手部特征。

10.根據權利要求9所述的方法，其特征在于，所述提取所述二值圖像中的手部特征包括：

利用多方向的Gabor濾波器對所述二值圖像進行多個方向的特征提取，獲得多個小波特征；

確定所述多個小波特征為所述手部特征。