[發明專利]手勢識別方法、裝置、設備和存儲介質

有效

• 申請號: 201810373819.0
• 申請日: 2018-04-24
• 公開（公告）號: CN108596092B
• 公開（公告）日: 2021-05-18
• 發明（設計）人: 史信楚;謝炳龍
• 申請（專利權）人: 亮風臺（上海）信息科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06F3/01;G06N3/04;G06N3/08
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發明公開了一種手勢識別方法、裝置、設備和存儲介質，一種手勢識別方法，包括：獲取攝像頭拍攝的圖像幀序列；以預設間隔對圖像幀序列中的待識別圖像幀進行圖像識別，確定待識別圖像幀是否為有效幀，其中，有效幀為同時存在人及手部特征，且人與手部的相對位置關系滿足預設位置關系的圖像幀；跟蹤檢測為有效幀的圖像幀后的各圖像幀是否為有效幀；若連續為有效幀的圖像幀的數量超過預設數量，對所有有效幀組成的幀序列中的手部運動軌跡進行軌跡分析識別，得到手勢識別結果。本發明實施例提供的手勢識別方法、裝置、設備和存儲介質，用于提高手勢識別的準確性。

技術領域

本發明實施例涉及圖像處理技術，尤其涉及一種手勢識別方法、裝置、設備和存儲介質。

背景技術

智能家電已經廣泛應用于人們的日常生活中，傳統的家電產品都是通過遙控器進行控制，但這需要用戶對額外的遙控器進行操作，無法滿足用戶對智能家電方便、快捷、隨心所欲的控制需求。

現有的手勢識別技術可以滿足用戶對智能家電產品的個性化操作需求，但現有的手勢識別技術僅對用戶的手部運動軌跡進行跟蹤，在復雜環境中容易出現識別錯誤或者無法識別的問題。

發明內容

本發明提供一種手勢識別方法、裝置、設備和存儲介質，用于提高手勢識別的準確性。

第一方面，本發明實施例提供一種手勢識別方法，包括：

獲取攝像頭拍攝的圖像幀序列；

以預設間隔對所述圖像幀序列中的待識別圖像幀進行圖像識別，確定待識別圖像幀是否為有效幀，其中，有效幀為同時存在人及手部特征，且人與手部的相對位置關系滿足預設位置關系的圖像幀；

跟蹤檢測為有效幀的圖像幀后的各圖像幀是否為有效幀；

若連續為有效幀的圖像幀的數量超過預設數量，對所有有效幀組成的幀序列中的手部運動軌跡進行軌跡分析識別，得到手勢識別結果。

在第一方面一種可能的實現方式中，以預設間隔對圖像幀序列中的待識別圖像幀進行圖像識別，確定待識別圖像幀是否為有效幀，包括：

采用壓縮卷積網絡和反卷積單幀檢測網絡組成的深度卷積神經網絡，以預設間隔對圖像幀序列中的待識別圖像幀進行圖像識別，確定待識別圖像幀中是否同時存在人及手部特征以及人及手部的空間位置；

確定人與手部的相對位置關系滿足預設位置關系的待識別圖像幀為有效幀。

在第一方面一種可能的實現方式中，采用壓縮卷積網絡和反卷積單幀檢測網絡組成的深度卷積神經網絡，以預設間隔對圖像幀序列中的待識別圖像幀進行圖像識別，確定待識別圖像幀中是否同時存在人及手部特征以及人及手部的空間位置，包括：

將所述圖像幀序列中的待識別圖像幀輸入壓縮卷積網絡；

將壓縮卷積網絡的輸出結果通過反卷積單幀檢測網絡中的反卷積層進行上采樣，然后將反卷積單幀檢測網絡中每級上采樣的結果與壓縮卷積網絡相應層級的輸出合并輸入檢測層，最后根據檢測層的輸出結果確定所述待識別圖像幀中是否同時存在人及手部特征以及人及手部的空間位置。

在第一方面一種可能的實現方式中，以預設間隔對圖像幀序列中的待識別圖像幀進行圖像識別，確定待識別圖像幀是否為有效幀之前，方法還包括：

降低待識別圖像幀的分辨率；

跟蹤檢測為有效幀的圖像幀后的各圖像幀是否為有效幀之前，方法還包括：

降低為有效幀的圖像幀后的各圖像幀的分辨率。

在第一方面一種可能的實現方式中，對所有有效幀組成的幀序列中的手部運動軌跡進行軌跡分析識別，得到手勢識別結果，包括：