[發(fā)明專利]基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別方法、設(shè)備、存儲(chǔ)介質(zhì)及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201811485288.0
• 申請(qǐng)日: 2018-12-04
• 公開（公告）號(hào): CN109635706B
• 公開（公告）日: 2020-09-01
• 發(fā)明（設(shè)計(jì)）人: 周文奇;熊鵬航;李美宏;邱軼琛
• 申請(qǐng)（專利權(quán)）人: 武漢灝存科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 深圳市恒程創(chuàng)新知識(shí)產(chǎn)權(quán)代理有限公司 44542
• 代理人: 趙愛蓉

本發(fā)明公開了基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別方法、設(shè)備、存儲(chǔ)介質(zhì)及裝置。本發(fā)明中采集當(dāng)前手勢(shì)數(shù)據(jù)，讀取與預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)對(duì)應(yīng)的預(yù)設(shè)層間關(guān)系模板，預(yù)設(shè)層間關(guān)系模板中包括各層間關(guān)系式，根據(jù)當(dāng)前手勢(shì)數(shù)據(jù)通過(guò)預(yù)設(shè)層間關(guān)系模板中的各層間關(guān)系式進(jìn)行基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別操作，以獲得手勢(shì)識(shí)別結(jié)果。區(qū)別于直接適用預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)來(lái)實(shí)施手勢(shì)識(shí)別操作的實(shí)施方式，本發(fā)明將對(duì)預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)進(jìn)行剝離并簡(jiǎn)化為層間關(guān)系式，通過(guò)適用層間關(guān)系式來(lái)實(shí)施手勢(shì)識(shí)別操作的實(shí)施方式，從而可以大大降低了手勢(shì)識(shí)別消耗的計(jì)算量，也就降低了對(duì)于設(shè)備的計(jì)算能力的要求，解決了手勢(shì)識(shí)別對(duì)于計(jì)算能力要求較高的技術(shù)問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明涉及神經(jīng)網(wǎng)絡(luò)技術(shù)領(lǐng)域，尤其涉及基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別方法、設(shè)備、存儲(chǔ)介質(zhì)及裝置。

背景技術(shù)

隨著電子設(shè)備的逐漸普及，用戶與電子設(shè)備之間的人機(jī)交互方式也從利用遙控器、鼠標(biāo)、鍵盤等外設(shè)進(jìn)行的簡(jiǎn)單交互方式，發(fā)展到了利用語(yǔ)音交互、體感交互、眼動(dòng)交互和手勢(shì)交互等多樣化的交互方式。

特別地，針對(duì)手勢(shì)交互方式而言，由于手勢(shì)交互方式較為方便，在很多應(yīng)用場(chǎng)景中都能夠較好地適用。

但是，由于手勢(shì)交互方式中存在手勢(shì)識(shí)別的環(huán)節(jié)，而且，手勢(shì)識(shí)別環(huán)節(jié)的計(jì)算過(guò)程比較復(fù)雜且對(duì)實(shí)時(shí)性要求比較高，這就要求進(jìn)行手勢(shì)識(shí)別的硬件設(shè)備需要具有較高的計(jì)算能力。

比如，若欲通過(guò)家庭中基本普及的數(shù)字機(jī)頂盒來(lái)實(shí)施手勢(shì)識(shí)別，明顯地，數(shù)字機(jī)頂盒由于計(jì)算能力不足可能會(huì)導(dǎo)致一幀圖像的處理時(shí)間太長(zhǎng)，無(wú)法滿足手勢(shì)識(shí)別環(huán)節(jié)對(duì)于實(shí)時(shí)交互的實(shí)際計(jì)算要求。

所以，實(shí)質(zhì)上存在著手勢(shì)識(shí)別對(duì)于計(jì)算能力要求較高的技術(shù)問(wèn)題。

上述內(nèi)容僅用于輔助理解本發(fā)明的技術(shù)方案，并不代表承認(rèn)上述內(nèi)容是現(xiàn)有技術(shù)。

發(fā)明內(nèi)容

本發(fā)明的主要目的在于提供基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別方法、設(shè)備、存儲(chǔ)介質(zhì)及裝置，旨在解決手勢(shì)識(shí)別對(duì)于計(jì)算能力要求較高的技術(shù)問(wèn)題。

為實(shí)現(xiàn)上述目的，本發(fā)明提供一種基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別方法，所述基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別方法包括以下步驟：

在接收到手勢(shì)識(shí)別指令時(shí)，采集目標(biāo)用戶的當(dāng)前手勢(shì)數(shù)據(jù)；

讀取與預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)對(duì)應(yīng)的預(yù)設(shè)層間關(guān)系模板，所述預(yù)設(shè)層間關(guān)系模板中包括各層間關(guān)系式，所述層間關(guān)系式用于表征所述預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)中的輸入層、隱含層與輸出層之間的關(guān)系；

根據(jù)所述當(dāng)前手勢(shì)數(shù)據(jù)通過(guò)所述預(yù)設(shè)層間關(guān)系模板中的各層間關(guān)系式進(jìn)行基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別操作，以獲得手勢(shì)識(shí)別結(jié)果。

優(yōu)選地，所述在接收到手勢(shì)識(shí)別指令時(shí)，采集目標(biāo)用戶的當(dāng)前手勢(shì)數(shù)據(jù)之前，所述基于神經(jīng)網(wǎng)絡(luò)的手勢(shì)識(shí)別方法還包括：

在接收到待訓(xùn)練手勢(shì)數(shù)據(jù)時(shí)，對(duì)所述待訓(xùn)練手勢(shì)數(shù)據(jù)進(jìn)行歸一化處理，以獲得歸一化的待訓(xùn)練手勢(shì)數(shù)據(jù)；

根據(jù)歸一化的待訓(xùn)練手勢(shì)數(shù)據(jù)對(duì)預(yù)設(shè)神經(jīng)網(wǎng)絡(luò)分類器進(jìn)行訓(xùn)練，以獲得預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)；

從所述預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)中提取第一層間權(quán)值，并根據(jù)所述第一層間權(quán)值構(gòu)建預(yù)設(shè)層間關(guān)系模板，所述第一層間權(quán)值用于記錄所述預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)中的輸入層、隱含層與輸出層依次之間的權(quán)重值。

優(yōu)選地，所述從所述預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)中提取第一層間權(quán)值，并根據(jù)所述第一層間權(quán)值構(gòu)建預(yù)設(shè)層間關(guān)系模板，包括：

從所述預(yù)設(shè)訓(xùn)練神經(jīng)網(wǎng)絡(luò)中提取第一層間權(quán)值與第一層閾值；

根據(jù)所述第一層間權(quán)值與所述第一層閾值按照前向傳播方式分別構(gòu)建與預(yù)設(shè)神經(jīng)網(wǎng)絡(luò)層對(duì)應(yīng)的層間關(guān)系式，并根據(jù)所述層間關(guān)系式確定預(yù)設(shè)層間關(guān)系模板。