[發(fā)明專利]手勢處理方法、交互控制方法及設備

在審

• 申請?zhí)枺?/td>: 201811032593.4
• 申請日: 2018-09-05
• 公開（公告）號: CN109255324A
• 公開（公告）日: 2019-01-22
• 發(fā)明（設計）人: 冷芝瑩;盧楊;王平平;于洋;梁曉輝
• 申請（專利權）人: 北京航空航天大學青島研究院
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06F3/01
• 代理公司: 北京太合九思知識產(chǎn)權代理有限公司 11610
• 代理人: 劉戈

本申請公開了一種手勢處理方法、交互控制方法及設備，所述手勢處理方法包括：采集手部運動時的視頻數(shù)據(jù)，并獲取所述視頻數(shù)據(jù)的目標圖像幀；提取所述目標圖像幀的手部特征；利用手勢識別模型識別所述手部特征，獲得手勢信息；確定手勢信息對應的控制命令；確定所述手部預定部位在所述圖像幀的目標位置；將所述目標位置映射至顯示屏幕，獲得對應的操作位置；其中，所述控制命令針對所述操作位置執(zhí)行。本申請減少了設備數(shù)量，同時提高控制準確度。

技術領域

本申請實施例涉及計算機技術領域，具體地說，涉及一種手勢處理方法、交互控制方法及設備。

背景技術

在人機交互領域中，手勢通常指人的手部運動，可以代表一種可以被智能設備識別的信息，例如，食指伸出，其他手指向手掌彎曲閉合時即為一種手勢，該手勢可以被賦予特定的手勢信息，假定該手勢對應的手勢信息為點擊操作，智能設備識別出該手勢后即執(zhí)行相應的點擊操作。手勢識別是通過數(shù)學算法識別手勢信息，以使得智能設備可以理解人的手部運動，并基于手勢信息實現(xiàn)人與智能設備的交互控制。

現(xiàn)有技術中，手勢識別時，通常采用數(shù)據(jù)手套采集手部數(shù)據(jù)。數(shù)據(jù)手套中內(nèi)置的傳感器可以在手部運動時感應手部運動數(shù)據(jù)。智能設備通過獲取數(shù)據(jù)手套采集的手部運動數(shù)據(jù)，并對獲得的手部運動數(shù)據(jù)進行分析處理，識別該手部運動數(shù)據(jù)對應的手勢信息，進而基于手勢信息完成設備交互。

但是，如果通過數(shù)據(jù)手套采集手部運動數(shù)據(jù)，還需要為智能設備配置數(shù)據(jù)手套，造成智能交互設備的設備量的增加，進而增加設備的復雜程度。在實際使用中，由于數(shù)據(jù)手套的使用，也增加了使用難度，操作方式復雜，使用不便。

發(fā)明內(nèi)容

有鑒于此，本申請?zhí)峁┝艘环N手勢處理方法、交互控制方法及設備，以解決現(xiàn)有技術中需要數(shù)據(jù)手套等單獨的感應設備來感應對應的運動數(shù)據(jù)，以實現(xiàn)智能設備的交互控制而導致設備成本增加的技術問題。

為了解決上述技術問題，本申請第一方面提供了一種手勢處理方法，包括：

采集手部運動時的視頻數(shù)據(jù)，并獲取所述視頻數(shù)據(jù)中的目標圖像幀；提取所述目標圖像幀中的手部特征；利用手勢識別模型識別所述手部特征，獲得手勢信息；確定手勢信息對應的控制命令；確定手部預定部位在所述目標圖像幀的目標位置；將所述目標位置映射至顯示屏幕，獲得對應的操作位置；其中，所述控制命令針對所述操作位置執(zhí)行。

第二方面本申請還提供一種交互控制方法，包括：

采集手部運動時的視頻數(shù)據(jù)，并所述視頻數(shù)據(jù)的目標圖像幀；

提取目標圖像幀的手部特征；

利用手勢識別模型識別所述手部特征，獲得手勢信息；

確定手勢信息對應的控制命令；

確定所述手部預定部位在所述目標圖像幀的目標位置；

將所述目標位置映射至顯示屏幕，獲得對應的操作位置；

在所述操作位置執(zhí)行所述控制命令。

第三方面本申請還提供一種手勢處理設備，包括：處理組件、與所述處理組件分別連接的存儲組件以及顯示組件；

所述存儲組件存儲一條或多條計算機程序指令；所述一條或多條計算機程序指令用于被所述處理組件調(diào)用并執(zhí)行；

所述處理組件用于：

采集手部運動時的視頻數(shù)據(jù)，并獲取所述視頻數(shù)據(jù)的目標圖像幀；提取所述目標圖像幀中的手部特征；利用手勢識別模型識別所述手部特征，獲得手勢信息；確定手勢信息對應的控制命令；確定所述手部預定部位在所述目標圖像幀的目標位置；將所述目標位置映射至所述顯示組件，獲得對應的操作位置；

其中，所述控制命令針對所述操作位置執(zhí)行。