[發(fā)明專利]一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202010601428.7
• 申請(qǐng)日: 2020-06-29
• 公開（公告）號(hào): CN111753764A
• 公開（公告）日: 2020-10-09
• 發(fā)明（設(shè)計(jì)）人: 李雪;李銳;金長(zhǎng)新
• 申請(qǐng)（專利權(quán)）人: 濟(jì)南浪潮高新科技投資發(fā)展有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06N3/02
• 代理公司: 濟(jì)南信達(dá)專利事務(wù)所有限公司 37100
• 代理人: 孫晶偉

1.一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法，其特征是針對(duì)捕捉到的圖像進(jìn)行預(yù)處理，篩選關(guān)鍵幀圖像，識(shí)別關(guān)鍵幀圖像的手勢(shì)動(dòng)作，

判斷手勢(shì)動(dòng)作為靜態(tài)手勢(shì)動(dòng)作還是動(dòng)態(tài)手勢(shì)動(dòng)作，

針對(duì)動(dòng)態(tài)手勢(shì)動(dòng)作利用光流的運(yùn)動(dòng)補(bǔ)償進(jìn)行動(dòng)作信息補(bǔ)償，

利用手勢(shì)識(shí)別模型通過姿態(tài)估計(jì)算法解析關(guān)鍵幀圖像中靜態(tài)手勢(shì)動(dòng)作，獲得靜態(tài)手勢(shì)動(dòng)作的手部關(guān)鍵點(diǎn)，同時(shí)通過姿態(tài)估計(jì)算法解析關(guān)鍵幀圖像中動(dòng)態(tài)手勢(shì)動(dòng)作，并結(jié)合補(bǔ)償?shù)膭?dòng)作信息，獲得動(dòng)態(tài)手勢(shì)動(dòng)作的手部關(guān)鍵點(diǎn)，進(jìn)行手勢(shì)動(dòng)作的識(shí)別分類。

2.根據(jù)權(quán)利要求1所述的一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法，其特征是關(guān)鍵幀圖像中位置變化范圍小于閾值的動(dòng)作序列組合的動(dòng)作為靜態(tài)手勢(shì)動(dòng)作，關(guān)鍵幀圖像中位置變化范圍在閾值以上的動(dòng)作序列組合的動(dòng)作為動(dòng)態(tài)手部動(dòng)作。

3.根據(jù)權(quán)利要求2所述的一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法，其特征是根據(jù)關(guān)鍵幀圖像，從上一個(gè)關(guān)鍵幀圖像開始到下一個(gè)關(guān)鍵幀圖像的前一幀作為一個(gè)動(dòng)作序列組合。

4.根據(jù)權(quán)利要求1-3任一所述的一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法，其特征是針對(duì)手勢(shì)識(shí)別模型進(jìn)行邊訓(xùn)練邊量化的壓縮處理。

5.根據(jù)權(quán)利要求4所述的一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法，其特征是手勢(shì)識(shí)別模型為神經(jīng)網(wǎng)絡(luò)模型。

6.一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別系統(tǒng)，其特征是包括預(yù)處理模塊、判斷模塊、補(bǔ)償模塊及模型識(shí)別模塊，

預(yù)處理模塊針對(duì)捕捉到的圖像進(jìn)行預(yù)處理，篩選關(guān)鍵幀圖像，識(shí)別關(guān)鍵幀圖像的手勢(shì)動(dòng)作，

判斷模塊判斷手勢(shì)動(dòng)作為靜態(tài)手勢(shì)動(dòng)作還是動(dòng)態(tài)手勢(shì)動(dòng)作，

補(bǔ)償模塊針對(duì)動(dòng)態(tài)手勢(shì)動(dòng)作利用光流的運(yùn)動(dòng)補(bǔ)償進(jìn)行動(dòng)作信息補(bǔ)償，

模型識(shí)別模塊利用手勢(shì)識(shí)別模型通過姿態(tài)估計(jì)算法解析關(guān)鍵幀圖像中靜態(tài)手勢(shì)動(dòng)作，獲得靜態(tài)手勢(shì)動(dòng)作的手部關(guān)鍵點(diǎn)，同時(shí)通過姿態(tài)估計(jì)算法解析關(guān)鍵幀圖像中動(dòng)態(tài)手勢(shì)動(dòng)作，并結(jié)合補(bǔ)償?shù)膭?dòng)作信息，獲得動(dòng)態(tài)手勢(shì)動(dòng)作的手部關(guān)鍵點(diǎn)，進(jìn)行手勢(shì)動(dòng)作的識(shí)別分類。

7.一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別裝置，其特征是，包括：至少一個(gè)存儲(chǔ)器和至少一個(gè)處理器；

所述至少一個(gè)存儲(chǔ)器，用于存儲(chǔ)機(jī)器可讀程序；

所述至少一個(gè)處理器，用于調(diào)用所述機(jī)器可讀程序，執(zhí)行權(quán)利要求1至5中任一所述的一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法。

8.計(jì)算機(jī)可讀介質(zhì)，其特征是所述計(jì)算機(jī)可讀介質(zhì)上存儲(chǔ)有計(jì)算機(jī)指令，所述計(jì)算機(jī)指令在被處理器執(zhí)行時(shí)，使所述處理器執(zhí)行權(quán)利要求1至5任一所述的一種邊緣端基于姿態(tài)估計(jì)的手勢(shì)識(shí)別方法。