[發明專利]一種基于耳機檢測動作進行功能控制的方法及系統

有效

• 申請號: 201911330275.0
• 申請日: 2019-12-20
• 公開（公告）號: CN111050266B
• 公開（公告）日: 2021-07-30
• 發明（設計）人: 朱鳳鄒;薛原
• 申請（專利權）人: 朱鳳鄒;北京摩高科技有限公司
• 主分類號: H04R29/00
• 分類號: H04R29/00;G06N3/04;G06K9/00
• 代理公司: 北京知聯天下知識產權代理事務所(普通合伙) 11594
• 代理人: 張陸軍;張迎新

1.一種基于耳機檢測動作進行功能控制的方法，其特征在于，包括：

所述耳機通過傳感器采集佩戴者動作信息；

基于所述動作信息，采用神經網絡算法和先驗規則識別目標動作；

所述目標動作識別結果用于控制與所述耳機相應的終端功能；

所述動作信息為原始動作序列；

所述采用神經網絡算法和先驗規則識別目標動作包括：

對所述原始動作序列采用第一神經網絡模型進行深度特征提取，得到子動作識別結果；

基于所述原始動作序列，根據先驗規則識別，得到姿態計算結果；

根據所述子動作識別結果、所述姿態計算結果和所述原始動作序列 ，采用第二神經網絡模型進行識別，得到所述目標動作識別結果；

第二神經網絡模型基于連續動作序列進行動作識別，是一個迭代循環的計算過程，在迭代過程中，根據子動作識別結果和姿態計算結果作為限定或影響迭代方向的條件；

所述根據先驗規則識別，得到姿態計算結果包括：判斷所述原始動作序列中的動作幅度和持續時間是否滿足相應的動作閾值。

2.根據權利要求1所述的基于耳機檢測動作進行功能控制的方法，其特征在于，

在采用第一神經網絡模型進行深度特征提取前，根據人工標注數據，訓練所述第一神經網絡模型進行監督性學習。

3.根據權利要求1所述的基于耳機檢測動作進行功能控制的方法，其特征在于，

所述第二神經網絡模型為LSTM模型，所述LSTM模型預先經過設定權重的訓練，用于根據多個相關子動作序列識別表示佩戴者意圖的目標動作。

4.根據權利要求1-3中任一項所述的基于耳機檢測動作進行功能控制的方法，其特征在于，所述目標動作識別結果用于控制與所述耳機相應的終端功能包括：

根據與所述耳機信號連接的終端應用確定工作模式；

在媒體播放模式下，根據所述目標動作識別結果控制媒體播放動作；

在非播放模式下，將所述目標動作識別結果轉換為系統操作動作映射發送到所述終端應用，控制終端應用功能。

5.一種基于耳機檢測動作進行功能控制的系統，其特征在于，包括：

傳感單元，用于設置在耳機中，采集佩戴者動作信息；

動作識別單元，用于基于所述動作信息，采用神經網絡算法和先驗規則識別目標動作；

輸出單元，用于將目標動作識別結果輸出到與所述耳機相應的被控制終端能；

所述動作信息為原始動作序列；

所述動作識別單元包括：

第一識別單元，所述第一識別單元用于對所述原始動作序列采用第一神經網絡模型進行深度特征提取，得到子動作識別結果；

第二識別單元，所述第二識別單元用于基于所述原始動作序列，根據先驗規則識別，得到姿態計算結果；

第三識別單元，所述第三識別單元用于根據所述子動作識別結果、所述姿態計算結果和所述原始動作序列 ，采用第二神經網絡模型進行識別，得到所述目標動作識別結果；

第二神經網絡模型基于連續動作序列進行動作識別，是一個迭代循環的計算過程，在迭代過程中，根據子動作識別結果和姿態計算結果作為限定或影響迭代方向的條件；

所述第二識別單元根據先驗規則識別，得到姿態計算結果包括：判斷所述原始動作序列中的動作幅度和持續時間是否滿足相應的動作閾值。

6.根據權利要求5所述的基于耳機檢測動作進行功能控制的系統，其特征在于，

所述第一識別單元在采用第一神經網絡模型進行深度特征提取前，根據人工標注數據，訓練所述第一神經網絡模型進行監督性學習。