[發(fā)明專利]一種新型的手勢(shì)識(shí)別系統(tǒng)裝置及方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201611044773.5
• 申請(qǐng)日: 2016-11-24
• 公開（公告）號(hào): CN108108648A
• 公開（公告）日: 2018-06-01
• 發(fā)明（設(shè)計(jì)）人: 陳墩金;覃爭鳴;何中平
• 申請(qǐng)（專利權(quán)）人: 廣州映博智能科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/46;G06F3/01
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種新型的手勢(shì)識(shí)別系統(tǒng)裝置，其特征在于，該系統(tǒng)裝置包括單目攝像頭、PC機(jī)和服務(wù)機(jī)器人，其中，

所述的單目攝像頭用于捕捉用戶的人臉圖像和手勢(shì)圖像；所述的PC機(jī)內(nèi)含圖像處理及人機(jī)交互程序，用于檢測(cè)處理單目攝像頭捕捉到的圖像，并將手勢(shì)結(jié)果以指令方式發(fā)送到服務(wù)機(jī)器人的運(yùn)動(dòng)端口；所述的服務(wù)機(jī)器人用于對(duì)接收到的指令做出應(yīng)答，從而實(shí)現(xiàn)此系統(tǒng)的人機(jī)交互目的。

2.一種應(yīng)用權(quán)利要求1所述的一種新型的手勢(shì)識(shí)別系統(tǒng)裝置實(shí)現(xiàn)的方法，其特征在于，該方法包括用戶圖像捕捉模塊、手勢(shì)圖像檢測(cè)模塊、手勢(shì)特征提取模塊、手勢(shì)結(jié)果識(shí)別模塊和手勢(shì)控制實(shí)現(xiàn)模塊，其中，

所述的用戶圖像捕捉模塊，通過單目攝像頭來捕捉用戶的臉部、手勢(shì)圖像；

所述的手勢(shì)圖像檢測(cè)模塊，通過人臉檢測(cè)和人手檢測(cè)，再對(duì)人手進(jìn)行閾值分割，從而獲得手勢(shì)的二值圖像；

所述的手勢(shì)特征提取模塊，在得到手勢(shì)的二值圖像之后，通過提取手勢(shì)輪廓的傅里葉描述子、手勢(shì)二值圖的Hu不變矩、凸缺陷個(gè)數(shù)作為手勢(shì)特征，從而更好地描述手勢(shì)信息；

所述的手勢(shì)結(jié)果識(shí)別模塊，通過BP神經(jīng)網(wǎng)絡(luò)來實(shí)現(xiàn)識(shí)別過程；

所述的手勢(shì)控制實(shí)現(xiàn)模塊，PC機(jī)將處理獲得的手勢(shì)結(jié)果向機(jī)器人運(yùn)動(dòng)接口發(fā)送指令，從而實(shí)現(xiàn)手勢(shì)控制。

3.根據(jù)權(quán)利要求2所述的一種新型的手勢(shì)識(shí)別系統(tǒng)方法，其特征在于，該系統(tǒng)方法采用雙手靜態(tài)手勢(shì)識(shí)別方案，使用雙手識(shí)別減少了目標(biāo)檢測(cè)文件個(gè)數(shù)，縮短了檢測(cè)時(shí)間，手勢(shì)交互自然，指令簡單。

4.根據(jù)權(quán)利要求2所述的一種新型的手勢(shì)識(shí)別系統(tǒng)方法，其特征在于，所述手勢(shì)圖像檢測(cè)模塊的方法，該方法通過結(jié)合Viola-Jones手勢(shì)檢測(cè)和基于YCbCr高斯模型的膚色檢測(cè)，有效降低Viola-Jones檢測(cè)器的誤檢率，同時(shí)克服了膚色檢測(cè)在有人臉和手臂存在時(shí)檢測(cè)手勢(shì)的困難。

5.根據(jù)權(quán)利要求2所述的一種新型的手勢(shì)識(shí)別系統(tǒng)方法，其特征在于，所述手勢(shì)特征提取模塊的手勢(shì)特征包括手勢(shì)二值圖的Hu不變矩、手勢(shì)輪廓的傅里葉描述子、凸缺陷個(gè)數(shù)，通過結(jié)合三者作為手勢(shì)特征，從而更準(zhǔn)確更詳細(xì)地描述手勢(shì)信息。