[發(fā)明專利]識(shí)別虛擬數(shù)字鍵盤的方法、裝置和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 201811513529.8
• 申請(qǐng)日: 2018-12-11
• 公開（公告）號(hào): CN111310776A
• 公開（公告）日: 2020-06-19
• 發(fā)明（設(shè)計(jì)）人: 許航;吳旭
• 申請(qǐng)（專利權(quán)）人: 航天信息股份有限公司
• 主分類號(hào): G06K9/62
• 分類號(hào): G06K9/62;G06F3/0488
• 代理公司: 北京英創(chuàng)嘉友知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11447
• 代理人: 魏嘉熹;南毅寧

本公開涉及一種識(shí)別虛擬數(shù)字鍵盤的方法、裝置和存儲(chǔ)介質(zhì)，所述方法包括：獲取所述虛擬鍵盤中的每個(gè)按鍵的圖片；計(jì)算所述圖片中每個(gè)像素點(diǎn)灰度值；基于每個(gè)像素點(diǎn)的所述灰度值計(jì)算所述圖片的平均灰度值；比較每個(gè)素點(diǎn)的所述灰度值與所述平均灰度值，以得到與所述像素點(diǎn)對(duì)應(yīng)的數(shù)字矩陣；基于所述數(shù)字矩陣與目標(biāo)數(shù)字矩陣的漢明距離識(shí)別所述圖片的數(shù)字。進(jìn)而根據(jù)識(shí)別的數(shù)字確定每個(gè)按鍵對(duì)應(yīng)的數(shù)字，從而實(shí)現(xiàn)對(duì)動(dòng)態(tài)鍵盤的操作，方便通過動(dòng)態(tài)鍵盤輸入相關(guān)信息。

技術(shù)領(lǐng)域

本公開涉及字符識(shí)別技術(shù)領(lǐng)域，具體地，涉及一種識(shí)別虛擬數(shù)字鍵盤的方法、裝置和存儲(chǔ)介質(zhì)。

背景技術(shù)

在對(duì)部分手機(jī)應(yīng)用軟件進(jìn)行自動(dòng)測(cè)試時(shí)，需要利用虛擬鍵盤輸入相關(guān)信息。相關(guān)技術(shù)中，由于虛擬鍵盤的按鍵分布采用一定標(biāo)準(zhǔn)，每個(gè)按鍵的字符對(duì)應(yīng)一個(gè)坐標(biāo)，因此獲取每個(gè)按鍵的坐標(biāo)后即相當(dāng)于獲得了按鍵的實(shí)際分布情況，可根據(jù)坐標(biāo)對(duì)按鍵進(jìn)行操作以輸入需要的信息。但是，對(duì)于部分應(yīng)用軟件，在輸入部分信息例如密碼的時(shí)候采用的為動(dòng)態(tài)鍵盤，動(dòng)態(tài)鍵盤的按鍵位置隨機(jī)分布，因此利用上述方法難以對(duì)動(dòng)態(tài)鍵盤的按鍵進(jìn)行準(zhǔn)確定位。

發(fā)明內(nèi)容

本公開的目的是提供一種識(shí)別虛擬數(shù)字鍵盤的方法、裝置和存儲(chǔ)介質(zhì)，用于解決相關(guān)技術(shù)中難以對(duì)動(dòng)態(tài)鍵盤的按鍵進(jìn)行準(zhǔn)確定位的問題。

根據(jù)本公開實(shí)施例的第一方面，提供一種識(shí)別虛擬數(shù)字鍵盤的方法，所述方法包括：

獲取所述虛擬鍵盤中的每個(gè)按鍵的圖片；

計(jì)算所述圖片中每個(gè)像素點(diǎn)的灰度值；

基于每個(gè)像素點(diǎn)的所述灰度值計(jì)算所述圖片的平均灰度值；

比較每個(gè)像素點(diǎn)的所述灰度值與所述平均灰度值，以得到與所述像素點(diǎn)對(duì)應(yīng)的數(shù)字矩陣；

基于所述數(shù)字矩陣與目標(biāo)數(shù)字矩陣的漢明距離識(shí)別所述圖片的數(shù)字。

可選地，所述比較每個(gè)像素點(diǎn)的所述灰度值與所述平均灰度值，包括：

若所述像素點(diǎn)的所述灰度值大于所述平均灰度值，生成與所述像素點(diǎn)對(duì)應(yīng)的值為1的數(shù)字；若所述像素點(diǎn)的所述灰度值小于等于所述平均灰度值，生成與所述像素點(diǎn)對(duì)應(yīng)的值為0的數(shù)字；

按照所述像素點(diǎn)在所述圖片中的排列順序?qū)⑴c所述像素點(diǎn)對(duì)應(yīng)的數(shù)字進(jìn)行排列，以得到與所述像素點(diǎn)對(duì)應(yīng)的數(shù)字矩陣。

可選地，所述漢明距離按照如下公式計(jì)算：

其中，d(a,b)表示所述漢明距離，a表示所述圖片對(duì)應(yīng)的數(shù)字矩陣，b表示所述目標(biāo)圖片對(duì)應(yīng)的目標(biāo)數(shù)字矩陣，w表示所述圖片的像素點(diǎn)的總列數(shù)，h表示所述圖片的像素點(diǎn)的總行數(shù)，x表示所述像素點(diǎn)在所述圖片中的橫坐標(biāo)，y表示所述像素點(diǎn)在所述圖片中的縱坐標(biāo)，G_a[x,y]表示所述圖片中坐標(biāo)為(x，y)的像素點(diǎn)對(duì)應(yīng)至所述數(shù)字矩陣中的數(shù)字，G_b[x,y]表示所述目標(biāo)圖片中坐標(biāo)為(x，y)的像素點(diǎn)對(duì)應(yīng)至所述目標(biāo)數(shù)字矩陣中的數(shù)字，為異或運(yùn)算符。

可選地，所述基于所述數(shù)字矩陣與目標(biāo)數(shù)字矩陣的漢明距離識(shí)別所述圖片的數(shù)字，包括：

計(jì)算所述漢明距離d(a,b)；

按照如下公式計(jì)算所述圖片與所述目標(biāo)圖片的相似度：

其中，sim為所述相似度；

選出與所述圖片的所述相似度為100％的目標(biāo)圖片；

設(shè)置與所述圖片的所述相似度為100％的目標(biāo)圖片所對(duì)應(yīng)的數(shù)字為所述圖片對(duì)應(yīng)的數(shù)字。

可選地，所述選出與所述圖片相似度為100％的目標(biāo)圖片，包括：