[發(fā)明專利]一種基于耳機(jī)檢測動(dòng)作進(jìn)行功能控制的方法及系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201911330275.0
• 申請日: 2019-12-20
• 公開（公告）號: CN111050266B
• 公開（公告）日: 2021-07-30
• 發(fā)明（設(shè)計(jì)）人: 朱鳳鄒;薛原
• 申請（專利權(quán)）人: 朱鳳鄒;北京摩高科技有限公司
• 主分類號: H04R29/00
• 分類號: H04R29/00;G06N3/04;G06K9/00
• 代理公司: 北京知聯(lián)天下知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11594
• 代理人: 張陸軍;張迎新

本發(fā)明公開了一種基于耳機(jī)檢測動(dòng)作進(jìn)行功能控制的方法，包括：所述耳機(jī)通過傳感器采集佩戴者動(dòng)作信息；基于所述動(dòng)作信息，采用神經(jīng)網(wǎng)絡(luò)算法和先驗(yàn)規(guī)則識別目標(biāo)動(dòng)作；所述目標(biāo)動(dòng)作識別結(jié)果用于控制與所述耳機(jī)相應(yīng)的終端功能。本發(fā)明的基于耳機(jī)檢測動(dòng)作進(jìn)行功能控制的方法及系統(tǒng)，將人工智能人類先驗(yàn)知識進(jìn)行結(jié)合，大大提高動(dòng)作識別的準(zhǔn)確性，同時(shí)減少對人工標(biāo)定數(shù)據(jù)的大量需求。

技術(shù)領(lǐng)域

本發(fā)明屬于媒體播放設(shè)備技術(shù)領(lǐng)域，特別涉及一種基于耳機(jī)檢測動(dòng)作進(jìn)行功能控制的方法及系統(tǒng)。

背景技術(shù)

耳機(jī)作為一種便攜式媒體播放設(shè)備給人們的工作和生活帶來了極大方便。在佩戴耳機(jī)使用電子設(shè)備進(jìn)行工作和娛樂的過程中，經(jīng)常會(huì)需要對設(shè)備執(zhí)行一些功能控制，如音樂播放、暫停、上一曲、下一曲等。傳統(tǒng)的功能控制通過設(shè)備上的實(shí)體按鍵或者是觸摸屏上的虛擬按鍵與設(shè)備交互。

為了更加便利的控制耳機(jī)相關(guān)的功能操作，簡化按鍵或消除按鍵成為改進(jìn)耳機(jī)控制的方向。現(xiàn)有技術(shù)中多采用光學(xué)識別人體運(yùn)動(dòng)來進(jìn)行相應(yīng)的功能控制，如微軟的Kinect，是Xbox外接的3D體感設(shè)備，可通過光學(xué)方式，感知用戶體態(tài)。但這種設(shè)備價(jià)格較高，同時(shí)攜帶不便，進(jìn)而也不便利用到耳機(jī)控制中。

現(xiàn)有技術(shù)中也存在使用運(yùn)動(dòng)傳感器感知佩戴者動(dòng)作的技術(shù)。但一般通過有限的預(yù)設(shè)動(dòng)作進(jìn)行簡單的識別匹配，而人體運(yùn)動(dòng)的方式復(fù)雜繁多，因此，很難做到智能的識別與控制，錯(cuò)誤動(dòng)作率高。

因此，如何實(shí)現(xiàn)智能地基于耳機(jī)檢測動(dòng)作進(jìn)行功能控制，是亟待解決的問題。

發(fā)明內(nèi)容

針對上述問題，本發(fā)明提供一種基于耳機(jī)檢測動(dòng)作進(jìn)行功能控制的方法，包括：

所述耳機(jī)通過傳感器采集佩戴者動(dòng)作信息；

基于所述動(dòng)作信息，采用神經(jīng)網(wǎng)絡(luò)算法和先驗(yàn)規(guī)則識別目標(biāo)動(dòng)作；

所述目標(biāo)動(dòng)作識別結(jié)果用于控制與所述耳機(jī)相應(yīng)的終端功能。

進(jìn)一步地，

所述動(dòng)作信息為原始動(dòng)作序列；

所述采用神經(jīng)網(wǎng)絡(luò)算法和先驗(yàn)規(guī)則識別目標(biāo)動(dòng)作包括：

對所述原始動(dòng)作序列采用第一神經(jīng)網(wǎng)絡(luò)模型進(jìn)行深度特征提取，得到子動(dòng)作識別結(jié)果；

基于所述原始動(dòng)作序列，根據(jù)先驗(yàn)規(guī)則識別，得到姿態(tài)計(jì)算結(jié)果；

根據(jù)所述子動(dòng)作識別結(jié)果、所述姿態(tài)計(jì)算結(jié)果和所述原始動(dòng)作系列，采用第二神經(jīng)網(wǎng)絡(luò)模型進(jìn)行識別，得到所述目標(biāo)動(dòng)作識別結(jié)果。

進(jìn)一步地，

在采用第一神經(jīng)網(wǎng)絡(luò)模型進(jìn)行深度特征提取前，根據(jù)人工標(biāo)注數(shù)據(jù)，訓(xùn)練所述第一神經(jīng)網(wǎng)絡(luò)模型進(jìn)行監(jiān)督性學(xué)習(xí)。

進(jìn)一步地，

所述根據(jù)先驗(yàn)規(guī)則識別，得到姿態(tài)計(jì)算結(jié)果包括：判斷所述原始動(dòng)作序列中的動(dòng)作幅度和持續(xù)時(shí)間是否滿足相應(yīng)的動(dòng)作閾值。

進(jìn)一步地，

所述第二神經(jīng)網(wǎng)絡(luò)模型為LSTM模型，所述LSTM模型預(yù)先經(jīng)過設(shè)定權(quán)重的訓(xùn)練，用于根據(jù)多個(gè)相關(guān)子動(dòng)作序列識別表示佩戴者意圖的目標(biāo)動(dòng)作。

進(jìn)一步地，

所述目標(biāo)動(dòng)作識別結(jié)果用于控制與所述耳機(jī)相應(yīng)的終端功能包括：

根據(jù)與所述耳機(jī)信號連接的終端應(yīng)用確定工作模式；

在媒體播放模式下，根據(jù)所述目標(biāo)動(dòng)作識別結(jié)果控制媒體播放動(dòng)作；

在非播放模式下，將所述目標(biāo)動(dòng)作識別結(jié)果轉(zhuǎn)換為系統(tǒng)操作動(dòng)作映射發(fā)送到所述終端應(yīng)用，控制終端應(yīng)用功能。