[發(fā)明專利]一種基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202110491140.3
• 申請(qǐng)日: 2021-05-06
• 公開（公告）號(hào): CN113515190A
• 公開（公告）日: 2021-10-19
• 發(fā)明（設(shè)計(jì)）人: 方華
• 申請(qǐng)（專利權(quán)）人: 廣東魅視科技股份有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06K9/00
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于，包括以下步驟：

S1、攝像機(jī)拍攝屏幕前所有操作人員的實(shí)時(shí)畫面，并將所述實(shí)時(shí)畫面發(fā)給送給圖像分析主機(jī)進(jìn)行圖像分析，所述圖像分析主機(jī)對(duì)所有所述操作人員進(jìn)行人體關(guān)節(jié)點(diǎn)識(shí)別，并將所述操作人員的身體部位進(jìn)行關(guān)聯(lián)得到關(guān)聯(lián)信息；

S2、所述圖像分析主機(jī)識(shí)別并提取所述攝像機(jī)實(shí)時(shí)畫面中所有所述操作人員的手勢(shì)，當(dāng)有任意所述操作人員的手勢(shì)與預(yù)先設(shè)定的手勢(shì)特征相同時(shí)，通過所述關(guān)聯(lián)信息提取所述操作人員的臉部特征，并判斷其臉部的水平偏轉(zhuǎn)角度是否在所述屏幕范圍內(nèi) ，如是，則將所述臉部特征對(duì)應(yīng)的所述操作人員確定為當(dāng)前操作人員，并將所述當(dāng)前操作人員的臉部圖像輸出到所述屏幕；

S3、所述圖像分析主機(jī)提取所述當(dāng)前操作人員的臉部的水平偏轉(zhuǎn)角度和俯仰角度以判斷所述當(dāng)前操作人員的注意力在所述屏幕上的區(qū)域，并通過數(shù)據(jù)輸出接口輸出光標(biāo)位置的絕對(duì)坐標(biāo)到屏幕對(duì)應(yīng)的區(qū)域的指令給屏幕內(nèi)容輸出設(shè)備，所述屏幕內(nèi)容輸出設(shè)備將光標(biāo)移動(dòng)到所述當(dāng)前操作人員注意力所在屏幕上的區(qū)域；

S4、所述圖像分析主機(jī)識(shí)別所述當(dāng)前操作人員的臉部，通過所述關(guān)聯(lián)信息判斷所述當(dāng)前操作人員的手部位置，同時(shí)提取所述手部位置的圖片供所述圖像分析主機(jī)識(shí)別所述當(dāng)前操作人員的手勢(shì)，并將相應(yīng)手勢(shì)對(duì)應(yīng)的鼠標(biāo)控制指令通過數(shù)據(jù)輸出接口輸出給屏幕內(nèi)容輸出設(shè)備。

2.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在所述S2的步驟中，如果有多個(gè)所述操作人員的手勢(shì)與預(yù)先設(shè)定的手勢(shì)特征相同時(shí)，則依據(jù)所述圖像分析主機(jī)識(shí)別的先后順序確定出所述當(dāng)前操作人員。

3.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S2中，當(dāng)在設(shè)定的時(shí)間內(nèi)未識(shí)別到所述操作人員的手勢(shì)，則所述圖像分析主機(jī)通過數(shù)據(jù)輸出接口輸出鼠標(biāo)完全釋放的信號(hào)給屏幕內(nèi)容輸出設(shè)備。

4.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：當(dāng)所述當(dāng)前操作人員的臉部的水平偏轉(zhuǎn)角度和俯仰偏轉(zhuǎn)角度有變化時(shí)，重新執(zhí)行步驟S3。

5.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述圖像分析主機(jī)提取到非所述當(dāng)前操作人員的手部位置圖片，則根據(jù)先進(jìn)者優(yōu)先規(guī)則，保持所述當(dāng)前操作人員不變。

6.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述圖像分析主機(jī)提取到非所述當(dāng)前操作人員的手部位置圖片，則根據(jù)先進(jìn)者先出規(guī)則，重新執(zhí)行S2步驟。

7.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述手部位置的圖片中所述當(dāng)前操作人員的手勢(shì)為握拳伸出食指時(shí)，則通過數(shù)據(jù)輸出接口輸出移動(dòng)光標(biāo)位置的指令給屏幕內(nèi)容輸出設(shè)備。

8.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述手部位置的圖片中所述當(dāng)前操作人員的手勢(shì)為握拳并伸出食指和中指時(shí)，則通過數(shù)據(jù)輸出接口輸出鼠標(biāo)左鍵按下的指令給屏幕內(nèi)容輸出設(shè)備。

9.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述手部位置的圖片中所述當(dāng)前操作人員的手勢(shì)為握拳并伸出食指和中指且移動(dòng)時(shí)，則通過數(shù)據(jù)輸出接口輸出鼠標(biāo)左鍵拖拽的指令給屏幕內(nèi)容輸出設(shè)備。

10.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述手部位置的圖片中所述當(dāng)前操作人員的手勢(shì)為握拳伸出拇指時(shí)，則通過數(shù)據(jù)輸出接口輸出鼠標(biāo)右鍵按下的指令給屏幕內(nèi)容輸出設(shè)備。

11.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述手部位置的圖片中所述當(dāng)前操作人員的手勢(shì)為握拳伸出食指和拇指并移動(dòng)時(shí)，則通過數(shù)據(jù)輸出接口輸出鼠標(biāo)右鍵按下并拖拽的指令給屏幕內(nèi)容輸出設(shè)備。

12.根據(jù)權(quán)利要求1所述的基于人體手勢(shì)的鼠標(biāo)功能實(shí)現(xiàn)方法，其特征在于：在步驟S4中，當(dāng)所述手部位置的圖片中所述當(dāng)前操作人員面向所述屏幕且手勢(shì)為伸出五指并上下滑動(dòng)時(shí)，則通過數(shù)據(jù)輸出接口輸出鼠標(biāo)滾輪滾動(dòng)的指令給屏幕內(nèi)容輸出設(shè)備，其中所述鼠標(biāo)滾輪滾動(dòng)的方向?yàn)樗鑫逯干舷禄瑒?dòng)速度更快的方向。