[發(fā)明專利]操控工效分析方法、設(shè)備及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010415145.3
• 申請(qǐng)日: 2020-05-15
• 公開（公告）號(hào): CN111553618B
• 公開（公告）日: 2021-06-25
• 發(fā)明（設(shè)計(jì)）人: 李小俚;趙小川;丁兆環(huán);屈勝平;韓鵬飛;張乾坤;劉華鵬;李陳
• 申請(qǐng)（專利權(quán)）人: 北京師范大學(xué);中國(guó)兵器工業(yè)計(jì)算機(jī)應(yīng)用技術(shù)研究所
• 主分類號(hào): G06Q10/06
• 分類號(hào): G06Q10/06;G06Q50/04;G06K9/00;A61B5/16
• 代理公司: 北京博雅睿泉專利代理事務(wù)所(特殊普通合伙) 11442
• 代理人: 馬鐵良

1.一種操控工效分析方法，包括：

獲取操控選手操控目標(biāo)對(duì)象執(zhí)行目標(biāo)任務(wù)產(chǎn)生的操控結(jié)果數(shù)據(jù)和生理狀態(tài)數(shù)據(jù)；

根據(jù)所述操控結(jié)果數(shù)據(jù)，獲得所述操控選手對(duì)于所述目標(biāo)任務(wù)的任務(wù)工效評(píng)分；

根據(jù)所述生理狀態(tài)數(shù)據(jù)，獲取所述操控選手對(duì)于所述目標(biāo)任務(wù)的認(rèn)知能力的認(rèn)知神經(jīng)工效評(píng)分，其中，所述生理狀態(tài)數(shù)據(jù)包括反映注意力情況的指標(biāo)數(shù)據(jù)、反映腦負(fù)荷情況的指標(biāo)數(shù)據(jù)、反映神經(jīng)疲勞情況的指標(biāo)數(shù)據(jù)、反映肌肉疲勞程度的指標(biāo)數(shù)據(jù)、及反映情緒控制能力的指標(biāo)數(shù)據(jù)中的至少一項(xiàng)；

根據(jù)所述任務(wù)工效評(píng)分和所述認(rèn)知神經(jīng)工效評(píng)分，獲得所述操控選手的操控評(píng)分；

根據(jù)所述操控評(píng)分，執(zhí)行設(shè)定的操作；

其中，所述根據(jù)所述生理狀態(tài)數(shù)據(jù)，獲取所述操控選手對(duì)于所述目標(biāo)任務(wù)的認(rèn)知能力的認(rèn)知神經(jīng)工效評(píng)分，包括：

將所述生理狀態(tài)數(shù)據(jù)輸入至預(yù)置的認(rèn)知神經(jīng)工效模型，獲得所述操控選手對(duì)于所述目標(biāo)任務(wù)的認(rèn)知能力的認(rèn)知神經(jīng)工效評(píng)分，其中，所述認(rèn)知神經(jīng)工效模型反映任意的生理狀態(tài)數(shù)據(jù)與認(rèn)知神經(jīng)工效評(píng)分間的映射關(guān)系，

其中，獲取所述生理狀態(tài)數(shù)據(jù)的步驟包括：

獲取各生理信息采集設(shè)備提供的生理信息數(shù)據(jù)，其中，任意所述生理信息采集設(shè)備提供的生理信息數(shù)據(jù)包括生理信號(hào)數(shù)據(jù)和生理圖像數(shù)據(jù)中的至少一項(xiàng)；

根據(jù)所述生理信息數(shù)據(jù)，獲得所述生理狀態(tài)數(shù)據(jù)，包括：

根據(jù)所述生理信息采集設(shè)備提供的生理信息數(shù)據(jù)，獲得用于評(píng)價(jià)所反映的生理特征指標(biāo)的參數(shù)的參數(shù)值；

根據(jù)所述參數(shù)值，確定所述操控選手對(duì)于對(duì)應(yīng)生理特征指標(biāo)的指標(biāo)數(shù)據(jù)；

生成所述生理狀態(tài)數(shù)據(jù)包括確定的所有指標(biāo)數(shù)據(jù)，

其中，所述各生理信息采集設(shè)備包括腦電采集設(shè)備，所述腦電采集設(shè)備提供的生理信息數(shù)據(jù)包括腦電信號(hào)和腦電圖像中的至少一項(xiàng)；所述腦電采集設(shè)備提供生理信息數(shù)據(jù)包括：

所述腦電采集設(shè)備將采集到的原始腦電信號(hào)順序通過多個(gè)噪聲識(shí)別模型過濾對(duì)應(yīng)的噪聲信號(hào)，獲得去噪后的腦電信號(hào)，其中，所述多個(gè)噪聲識(shí)別模型包括用于去除眼動(dòng)干擾的噪聲識(shí)別模型、去除心電干擾的噪聲識(shí)別模型、去除肌電干擾的噪聲識(shí)別模型、去除頭動(dòng)干擾的噪聲識(shí)別模型中的至少一項(xiàng)，獲得所述多個(gè)噪聲識(shí)別模型中任意噪聲識(shí)別模型的步驟包括：采集該噪聲識(shí)別模型所要濾除的噪聲信號(hào)；提取該噪聲信號(hào)的信號(hào)特征；以及，根據(jù)所述信號(hào)特征，訓(xùn)練得到該任意噪聲識(shí)別模型；

生成所提供的生理信息數(shù)據(jù)包括所述去噪后的腦電信號(hào)；和/或，

所述各生理信息采集設(shè)備包括肌電采集設(shè)備，所述肌電采集設(shè)備提供的生理信息數(shù)據(jù)包括肌電信號(hào)和肌電圖像中的至少一項(xiàng)；和/或，

所述各生理信息采集設(shè)備包括心電采集設(shè)備，所述心電采集設(shè)備提供的生理信息數(shù)據(jù)包括心電信號(hào)和心電圖像中的至少一項(xiàng)；和/或，

所述各生理信息采集設(shè)備包括用于采集面部動(dòng)作的視頻采集設(shè)備，所述視頻采集設(shè)備提供的生理信息數(shù)據(jù)包括面部特征的變化數(shù)據(jù)和面部圖像數(shù)據(jù)中的至少一項(xiàng)，所述視頻采集設(shè)備提供生理信息數(shù)據(jù)包括：

獲取采集到的視頻圖像；

識(shí)別所述視頻圖像中的臉部區(qū)域；

在識(shí)別到的臉部區(qū)域中，定位眼部位置和嘴部位置；

根據(jù)每相鄰兩幀視頻圖像間眼部位置的灰度變化，確定出現(xiàn)眨眼動(dòng)作的時(shí)間點(diǎn)；

根據(jù)每相鄰兩幀視頻圖像間嘴部位置的灰度變化，確定出現(xiàn)打哈欠動(dòng)作的時(shí)間點(diǎn)；

根據(jù)所述時(shí)間點(diǎn)，生成所述視頻采集設(shè)備提供的生理信息數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述執(zhí)行設(shè)定的操作包括以下至少一項(xiàng)：

第一項(xiàng)，輸出所述操控評(píng)分；

第二項(xiàng)，根據(jù)所述操控評(píng)分，提供所述操控選手是否入選的選拔結(jié)果；

第三項(xiàng)，根據(jù)所述操控評(píng)分，確定所述操控選手的操控等級(jí)；

第四項(xiàng)，根據(jù)同一操控選手通過不同運(yùn)動(dòng)控制裝置操控目標(biāo)對(duì)象執(zhí)行目標(biāo)任務(wù)的操控評(píng)分，選出使得所述操控評(píng)分滿足設(shè)定要求的操控組合，其中，一個(gè)操控組合包括相適配的操控選手和運(yùn)動(dòng)控制裝置。

3.根據(jù)權(quán)利要求1所述的方法，其中，所述方法還包括：

響應(yīng)于設(shè)置應(yīng)用場(chǎng)景的操作，提供設(shè)置入口；

獲取通過所述設(shè)置入口輸入的應(yīng)用場(chǎng)景，其中，所述輸入的應(yīng)用場(chǎng)景反映基于操控評(píng)分所要執(zhí)行的操作；

根據(jù)所述輸入的應(yīng)用場(chǎng)景，確定所述設(shè)定的操作的操作內(nèi)容。