[發(fā)明專利]一種腦肌聯(lián)合的手勢指令識別方法、裝置和電子設備

在審

• 申請?zhí)枺?/td>: 202210984494.6
• 申請日: 2022-08-17
• 公開（公告）號: CN115357117A
• 公開（公告）日: 2022-11-18
• 發(fā)明（設計）人: 周銅;何熲;高軍暉
• 申請（專利權）人: 上海暖禾腦科學技術有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 上海點威知識產權代理有限公司 31326
• 代理人: 杜焱

本說明書實施例提供一種腦肌聯(lián)合的手勢指令識別方法，通過同步自由狀態(tài)下的采集腦電信號、肌電信號和健側手動作的圖像，根據(jù)所述示意動作判斷所述健側手動作是否滿足預設條件，滿足條件則存儲，通過顯示裝置播放示意動作并限制健側手的狀態(tài)，同步采集限制狀態(tài)下的腦電信號、肌電信號，將其加蓋時間戳后存儲到存儲介質中，利用限制狀態(tài)、自由狀態(tài)下的腦電信號和肌電信號訓練手勢預測模型，采集腦卒中患者的腦電信號、肌電信號并利用所述手勢預測模型預測手部動作。通過結合限制狀態(tài)、自由狀態(tài)的腦電信號和肌電信號，兼顧了閑置狀態(tài)時的腦電信號和肌電信號，能夠有效對患者的手勢指令進行預測，提高了有效性。

技術領域

本申請涉及計算機領域，尤其涉及一種腦肌聯(lián)合的手勢指令識別方法、裝置和電子設備。

背景技術

腦卒中是由于腦部血管堵塞缺血或者血管破裂出血引起的一種疾病，發(fā)病率高，致殘率高，發(fā)病趨于年輕化，患病后常常造成嚴重的肢體運動功能障礙，其中手功能障礙對患者的生活影響尤為嚴重。手部神經分布密集且精細，與大腦神經關系緊密，另外大腦皮層中控制手部的區(qū)域面積較大，所以手功能障礙難于恢復。和傳統(tǒng)的被動康復訓練相比，利用腦電信號或肌電信號控制手功能康復設備進行訓練，可以把主動意識參與到康復治療中，增加患者腦部運動神經元活動的機會，反復訓練后能增強腦部運動神經和脊神經的連接，完成對中樞脊髓以及外周神經的綜合干預。

肌電信號具有幅值高、易檢測、特征明顯等特性，容易進行模式分類。腦電信號具有時間分辨率高、操作簡單易獲取等優(yōu)點。然而對于運動障礙的患者，業(yè)內目前沒有能夠有效預測動作的方法。

有必要提供一種方法，提高手勢指令識別的有效性。

發(fā)明內容

本說明書實施例提供一種腦肌聯(lián)合的手勢指令識別方法、裝置和電子設備，用以提高手勢指令識別的有效性。

本說明書實施例提供一種腦肌聯(lián)合的手勢指令識別方法，包括：

用戶佩戴腦電采集設備，并在健側手臂佩戴肌電采集設備，向顯示裝置發(fā)送示意動作信息，通過所述顯示裝置播放示意動作，手部自由跟隨示意動作，并同步自由狀態(tài)下的采集腦電信號、肌電信號和健側手動作的圖像；

根據(jù)所述示意動作判斷所述健側手動作是否滿足預設條件，將滿足條件的健側手動作及同步采集的腦電信號、肌電信號存儲到存儲介質中；

通過所述顯示裝置播放示意動作并限制健側手的狀態(tài)，同步采集限制狀態(tài)下的腦電信號、肌電信號，將其加蓋時間戳后存儲到存儲介質中；

利用限制狀態(tài)、自由狀態(tài)下的腦電信號和肌電信號訓練手勢預測模型；

采集腦卒患者的腦電信號、肌電信號并利用所述手勢預測模型預測手部動作。

本說明書實施例提供一種腦肌聯(lián)合的手勢指令識別裝置，包括：

自由狀態(tài)信號采集模塊，用戶佩戴腦電采集設備，并在健側手臂佩戴肌電采集設備，向顯示裝置發(fā)送示意動作信息，通過所述顯示裝置播放示意動作，手部自由跟隨示意動作，并同步自由狀態(tài)下的采集腦電信號、肌電信號和健側手動作的圖像；

判斷模塊，根據(jù)所述示意動作判斷所述健側手動作是否滿足預設條件，將滿足條件的健側手動作及同步采集的腦電信號、肌電信號存儲到存儲介質中；

限制狀態(tài)信號采集模塊，通過所述顯示裝置播放示意動作并限制健側手的狀態(tài)，同步采集限制狀態(tài)下的腦電信號、肌電信號，將其加蓋時間戳后存儲到存儲介質中；

訓練模塊，利用限制狀態(tài)、自由狀態(tài)下的腦電信號和肌電信號訓練手勢預測模型；

預測模塊，采集腦卒患者的腦電信號、肌電信號并利用所述手勢預測模型預測手部動作。

本說明書實施例還提供一種電子設備，其中，該電子設備包括：

處理器；以及，