[發(fā)明專利]基于深度學(xué)習(xí)的手勢識別方法及設(shè)備

在審

• 申請?zhí)枺?/td>: 201910242356.9
• 申請日: 2019-03-28
• 公開（公告）號: CN109977875A
• 公開（公告）日: 2019-07-05
• 發(fā)明（設(shè)計(jì)）人: 袁飛;華仁紅;馬向軍;孫文鳳
• 申請（專利權(quán)）人: 北京易達(dá)圖靈科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 北京路浩知識產(chǎn)權(quán)代理有限公司 11002
• 代理人: 王慶龍;馬英迪

1.一種基于深度學(xué)習(xí)的手勢識別方法，其特征在于，包括：

將待識別圖像輸入預(yù)先構(gòu)建的手勢識別模型；其中，所述手勢識別模型基于預(yù)先標(biāo)注的圖像樣本和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得；

基于手勢識別模型的輸出結(jié)果，獲得待識別圖像中包含手勢的子圖像。

2.根據(jù)權(quán)利要求1所述的手勢識別方法，其特征在于，將待識別圖像輸入預(yù)先構(gòu)建的手勢識別模型，之前還包括：

獲取第一圖像樣本集，并對第一圖像樣本集進(jìn)行標(biāo)注；

基于標(biāo)注的第一圖像樣本集和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得手勢識別模型。

3.根據(jù)權(quán)利要求2所述的手勢識別方法，其特征在于，基于標(biāo)注的第一圖像樣本集和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得手勢識別模型，之前還包括：

調(diào)整YOLOv3網(wǎng)絡(luò)層輸入大小，使網(wǎng)絡(luò)層提取到的手勢特征信息增加；

修改最后一層拼接層route的參數(shù)；

修改上采樣層upsampe層的參數(shù)。

4.根據(jù)權(quán)利要求3所述的手勢識別方法，其特征在于，基于標(biāo)注的第一圖像樣本集和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得手勢識別模型，之前還包括：

在YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)上添加focus loss損失函數(shù)。

5.根據(jù)權(quán)利要求4所述的手勢識別方法，其特征在于，基于標(biāo)注的第一圖像樣本集和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得手勢識別模型，包括：

基于標(biāo)注的第一圖像樣本集和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得手勢識別模型，直至loss不再下降為止。

6.根據(jù)權(quán)利要求5所述的手勢識別方法，其特征在于，基于標(biāo)注的第一圖像樣本集和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得手勢識別模型，之后還包括：

獲取真實(shí)場景中的圖像樣本，作為第二圖像樣本集；

對第二圖像樣本集進(jìn)行標(biāo)注；

基于標(biāo)注后的第二圖像樣本集，對手勢識別模型進(jìn)行調(diào)整訓(xùn)練。

7.根據(jù)權(quán)利要求5所述的手勢識別方法，其特征在于，基于標(biāo)注的第一圖像樣本集和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得手勢識別模型，之后還包括：

基于手勢識別模型的識別準(zhǔn)確率和速度，對手勢識別模型的輸入大小進(jìn)行調(diào)整。

8.根據(jù)權(quán)利要求2所述的手勢識別方法，其特征在于，第一圖像樣本集包括攝像設(shè)備采集的圖片、網(wǎng)上下載的公共圖片和經(jīng)過圖像處理技術(shù)擴(kuò)充的圖片。

9.一種基于深度學(xué)習(xí)的手勢識別設(shè)備，其特征在于，包括：

輸入模塊，用于將待識別圖像輸入預(yù)先構(gòu)建的手勢識別模型；其中，所述手勢識別模型基于預(yù)先標(biāo)注的圖像樣本和YOLOv3深度學(xué)習(xí)網(wǎng)絡(luò)訓(xùn)練獲得；

獲取模塊，用于基于手勢識別模型的輸出結(jié)果，獲得待識別圖像中包含手勢的子圖像。

10.一種電子設(shè)備，包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上并可在處理器上運(yùn)行的計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述程序時(shí)實(shí)現(xiàn)如權(quán)利要求1至8任一項(xiàng)所述手勢識別方法的步驟。