[發(fā)明專利]鼠標(biāo)手勢(shì)的識(shí)別方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201710076299.2
• 申請(qǐng)日: 2017-02-13
• 公開（公告）號(hào): CN106845439A
• 公開（公告）日: 2017-06-13
• 發(fā)明（設(shè)計(jì)）人: 張小敏;羅健;韓榮華;唐嬋娟
• 申請(qǐng)（專利權(quán)）人: 深圳市華第時(shí)代科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06N3/08;G06F3/0484;G06F3/0487
• 代理公司: 深圳市科冠知識(shí)產(chǎn)權(quán)代理有限公司44355
• 代理人: 王海駿

技術(shù)領(lǐng)域

本發(fā)明涉及通信技術(shù)領(lǐng)域，尤其涉及一種鼠標(biāo)手勢(shì)的識(shí)別方法和裝置。

背景技術(shù)

在現(xiàn)有的Windows計(jì)算機(jī)中，用戶常常通過鼠標(biāo)在瀏覽器的網(wǎng)頁(yè)上劃出某種特定的軌跡，通過該軌跡實(shí)現(xiàn)相應(yīng)的操作，例如可以實(shí)現(xiàn)預(yù)定的前進(jìn)、后退、刷新、關(guān)閉窗口等常用操作。其過程具體如下：用鼠標(biāo)輸入圖形，然后獲取鼠標(biāo)輸入的圖形與模板進(jìn)行對(duì)比，提取特征，在網(wǎng)頁(yè)上進(jìn)行識(shí)別結(jié)果的輸出。

但是，目前鼠標(biāo)手勢(shì)大多數(shù)還只限于瀏覽器上的應(yīng)用，而對(duì)于其他Windows客戶端應(yīng)用程序并不適用。但是，由于計(jì)算機(jī)對(duì)鼠標(biāo)軌跡識(shí)別的準(zhǔn)確度還有待提高，現(xiàn)在的鼠標(biāo)手勢(shì)還比較簡(jiǎn)單，對(duì)用戶而言還不能體會(huì)到鼠標(biāo)手勢(shì)比鍵盤上的快捷鍵會(huì)更加的方便快捷，而且鼠標(biāo)手勢(shì)是基于字符識(shí)別的，字符識(shí)別是通過基于字符結(jié)構(gòu)的識(shí)別法及模糊匹配方法來(lái)進(jìn)行處理，所以識(shí)別精度不高。

基于此，有必要提供一種鼠標(biāo)手勢(shì)的識(shí)別方法，以解決當(dāng)前鼠標(biāo)手勢(shì)識(shí)別應(yīng)用范圍有限、識(shí)別精度不高的問題。

發(fā)明內(nèi)容

本發(fā)明的主要目的在于解決現(xiàn)有技術(shù)在鼠標(biāo)手勢(shì)識(shí)別應(yīng)用范圍有限、識(shí)別精度不高的技術(shù)問題。

為實(shí)現(xiàn)上述目的，本發(fā)明提供的一種鼠標(biāo)手勢(shì)的識(shí)別方法，所述方法包括：

偵測(cè)用戶通過鼠標(biāo)操作輸入的鼠標(biāo)手勢(shì)，獲取鼠標(biāo)手勢(shì)圖像以得到待識(shí)別圖像；

對(duì)所述待識(shí)別圖像進(jìn)行預(yù)處理以得到所述待識(shí)別圖像的特征向量；

將所述特征向量輸入預(yù)先訓(xùn)練的BP神經(jīng)網(wǎng)絡(luò)中以得到識(shí)別字符。

優(yōu)選地，所述對(duì)所述待識(shí)別圖像進(jìn)行預(yù)處理以得到所述待識(shí)別圖像的特征向量具體包括：

對(duì)所述待識(shí)別圖像進(jìn)行灰度化處理；

對(duì)灰度化處理后的所述待識(shí)別圖像進(jìn)行二值化處理并進(jìn)行去離散噪聲處理；

對(duì)去離散噪聲處理后的所述待識(shí)別圖像進(jìn)行歸一化處理以得到待識(shí)別的圖像的歸一化像素點(diǎn)陣圖；

從所述歸一化像素點(diǎn)陣圖的像素矩陣中提取所述待識(shí)別圖像的特征向量。

優(yōu)選地，所述從所述歸一化像素點(diǎn)陣圖的像素矩陣中提取所述待識(shí)別圖像的特征向量具體包括：

從所述歸一化圖像點(diǎn)陣圖中提取各像素值以得到所述待識(shí)別圖像對(duì)應(yīng)的像素矩陣；

將所述像素矩陣轉(zhuǎn)化為列矩陣以得到所述待識(shí)別圖像的特征列向量。

優(yōu)選地，在所述偵測(cè)用戶通過鼠標(biāo)操作輸入的鼠標(biāo)手勢(shì)，獲取鼠標(biāo)手勢(shì)圖像以得到待識(shí)別圖像之前，所述方法還包括：通過預(yù)設(shè)的手勢(shì)模板圖像對(duì)預(yù)設(shè)的BP神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練以得到所述預(yù)先訓(xùn)練的BP神經(jīng)網(wǎng)絡(luò)。

優(yōu)選地，所述通過預(yù)設(shè)的手勢(shì)模板圖像對(duì)預(yù)設(shè)BP神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練以得到所述預(yù)先訓(xùn)練的BP神經(jīng)網(wǎng)絡(luò)具體包括：

對(duì)預(yù)設(shè)的各手勢(shì)模板圖像進(jìn)行預(yù)處理以得到各手勢(shì)模板圖像的特征向量；

設(shè)定預(yù)設(shè)的BP神經(jīng)網(wǎng)絡(luò)的期望輸出為所述各手勢(shì)模板圖像對(duì)應(yīng)的字符；

將所述各手勢(shì)模板圖像的特征向量輸入所述BP神經(jīng)網(wǎng)絡(luò)，根據(jù)期望輸出對(duì)所述BP神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練；

當(dāng)所述BP神經(jīng)網(wǎng)絡(luò)的訓(xùn)練次數(shù)達(dá)到預(yù)設(shè)次數(shù)或誤差值小于期望值時(shí)，停止訓(xùn)練并保存此時(shí)的BP神經(jīng)網(wǎng)絡(luò)的各參數(shù)以得到預(yù)先訓(xùn)練的BP神經(jīng)網(wǎng)絡(luò)。

此外，為實(shí)現(xiàn)上述目的，本發(fā)明還提供一種鼠標(biāo)手勢(shì)的識(shí)別裝置，所述鼠標(biāo)手勢(shì)的識(shí)別裝置包括：

偵測(cè)模塊，用于偵測(cè)用戶通過鼠標(biāo)操作輸入的鼠標(biāo)手勢(shì)，獲取鼠標(biāo)手勢(shì)圖像以得到待識(shí)別圖像；

處理模塊，用于對(duì)所述待識(shí)別圖像進(jìn)行預(yù)處理以得到所述待識(shí)別圖像的特征向量；

識(shí)別模塊，用于將所述特征向量輸入預(yù)先訓(xùn)練的BP神經(jīng)網(wǎng)絡(luò)中以得到識(shí)別字符。

優(yōu)選地，所述處理模塊具體包括：

灰度化單元，用于對(duì)所述待識(shí)別圖像進(jìn)行灰度化處理；

二值化單元，用于對(duì)灰度化處理后的所述待識(shí)別圖像進(jìn)行二值化處理并進(jìn)行去離散噪聲處理；

歸一化單元，用于對(duì)去離散噪聲處理后的所述待識(shí)別圖像進(jìn)行歸一化處理以得到待識(shí)別的圖像的歸一化像素點(diǎn)陣圖；

提取單元，用于從所述歸一化像素點(diǎn)陣圖的像素矩陣中提取所述待識(shí)別圖像的特征向量。

優(yōu)選地，所述提取單元具體包括：

矩陣子單元，用于從所述歸一化圖像點(diǎn)陣圖中提取各像素值以得到所述待識(shí)別圖像對(duì)應(yīng)的像素矩陣；

轉(zhuǎn)換子單元，用于將所述像素矩陣轉(zhuǎn)化為列矩陣以得到所述待識(shí)別圖像的特征列向量。

優(yōu)選地，所述裝置還包括：訓(xùn)練模塊，用于通過預(yù)設(shè)的手勢(shì)模板圖像對(duì)預(yù)設(shè)的BP神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練以得到所述預(yù)先訓(xùn)練的BP神經(jīng)網(wǎng)絡(luò)。

優(yōu)選地，所述訓(xùn)練模塊具體包括：