[發(fā)明專利]一種基于人機雙向的智能監(jiān)盤管理方法及系統(tǒng)

有效

• 申請?zhí)枺?/td>: 202010775885.8
• 申請日: 2020-08-05
• 公開（公告）號: CN111970489B
• 公開（公告）日: 2022-05-24
• 發(fā)明（設(shè)計）人: 滕蔚;何立榮;曹鑫
• 申請（專利權(quán)）人: 北京必可測科技股份有限公司
• 主分類號: H04N7/18
• 分類號: H04N7/18;G08B21/24;G06Q10/06;G06Q50/04;G06N3/04;G06N3/08
• 代理公司: 北京勁創(chuàng)知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11589
• 代理人: 張鐵蘭

1.一種基于人機雙向的智能監(jiān)盤管理方法，其特征在于，包括：

獲取當前時刻監(jiān)盤人員的當前人員狀態(tài)圖像以及當前時刻監(jiān)盤顯示屏的當前顯示屏圖像；

將所述當前人員狀態(tài)圖像輸入到訓(xùn)練好的第一神經(jīng)網(wǎng)絡(luò)中，對有用數(shù)據(jù)進行人工標注并剔除無用數(shù)據(jù)后，輸出當前人員狀態(tài)檢測結(jié)果；所述當前人員狀態(tài)檢測結(jié)果包括人員正常狀態(tài)和人員異常狀態(tài)；

當所述當前人員狀態(tài)檢測結(jié)果為人員異常狀態(tài)，發(fā)出第一告警信號；

將所述當前顯示屏圖像輸入到訓(xùn)練好的第二神經(jīng)網(wǎng)絡(luò)中，對有用數(shù)據(jù)進行人工標注并剔除無用數(shù)據(jù)后，輸出當前顯示屏狀態(tài)檢測結(jié)果；所述當前顯示屏狀態(tài)檢測結(jié)果包括顯示屏正常狀態(tài)和顯示屏異常狀態(tài)；

當所述當前顯示屏狀態(tài)檢測結(jié)果為顯示屏異常狀態(tài)，發(fā)出第二告警信號；

所述訓(xùn)練好的第一神經(jīng)網(wǎng)絡(luò)訓(xùn)練過程具體包括：

獲取訓(xùn)練人員狀態(tài)圖像集合；所述訓(xùn)練人員狀態(tài)圖像集合包括監(jiān)盤人員在正常工作狀態(tài)下的圖像以及監(jiān)盤人員在異常工作狀態(tài)下的圖像；

根據(jù)所述訓(xùn)練人員狀態(tài)圖像集合對第一神經(jīng)網(wǎng)絡(luò)進行訓(xùn)練，得到預(yù)訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)；所述第一神經(jīng)網(wǎng)絡(luò)包括兩個神經(jīng)元層和一個分類器；

判斷第一當前迭代次數(shù)是否小于第一預(yù)設(shè)迭代次數(shù)，得到第一判斷結(jié)果；

若所述第一判斷結(jié)果表示第一當前迭代次數(shù)小于第一預(yù)設(shè)迭代次數(shù)，使用反向傳播算法對所述第一神經(jīng)網(wǎng)絡(luò)中的權(quán)值進行調(diào)節(jié)，并返回“根據(jù)所述訓(xùn)練人員狀態(tài)圖像集合對第一神經(jīng)網(wǎng)絡(luò)進行訓(xùn)練，得到預(yù)訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)”步驟；

若所述第一判斷結(jié)果表示第一當前迭代次數(shù)大于或等于第一預(yù)設(shè)迭代次數(shù)，所述預(yù)訓(xùn)練第一神經(jīng)網(wǎng)絡(luò)為訓(xùn)練好的第一神經(jīng)網(wǎng)絡(luò)；

所述訓(xùn)練好的第二神經(jīng)網(wǎng)絡(luò)訓(xùn)練過程具體包括：

獲取訓(xùn)練顯示屏狀態(tài)圖像集合；所述訓(xùn)練顯示屏狀態(tài)圖像集合包括顯示屏上的參數(shù)在正常狀態(tài)下的圖像以及顯示屏上的參數(shù)在異常狀態(tài)下的圖像；

根據(jù)所述訓(xùn)練顯示屏狀態(tài)圖像集合對第二神經(jīng)網(wǎng)絡(luò)進行訓(xùn)練，得到預(yù)訓(xùn)練第二神經(jīng)網(wǎng)絡(luò)；所述第二神經(jīng)網(wǎng)絡(luò)包括兩個神經(jīng)元層和一個分類器；

判斷第二當前迭代次數(shù)是否小于第二預(yù)設(shè)迭代次數(shù)，得到第二判斷結(jié)果；

若所述第二判斷結(jié)果表示第二當前迭代次數(shù)小于第二預(yù)設(shè)迭代次數(shù)，使用反向傳播算法對所述第二神經(jīng)網(wǎng)絡(luò)中的權(quán)值進行調(diào)節(jié)，并返回“根據(jù)所述訓(xùn)練顯示屏狀態(tài)圖像集合對第二神經(jīng)網(wǎng)絡(luò)進行訓(xùn)練，得到預(yù)訓(xùn)練第二神經(jīng)網(wǎng)絡(luò)”步驟；

若所述第二判斷結(jié)果表示第二當前迭代次數(shù)大于或等于第二預(yù)設(shè)迭代次數(shù)，所述預(yù)訓(xùn)練第二神經(jīng)網(wǎng)絡(luò)為訓(xùn)練好的第二神經(jīng)網(wǎng)絡(luò)；

在集控室中進行高清攝像頭的布置，布置數(shù)量、位置和角度均滿足覆蓋集控室中相關(guān)的監(jiān)盤人員和大屏顯示屏；對所述大屏顯示屏和所述監(jiān)盤人員進行拍攝，同時對大屏上的異常狀況和人員分神動作進行模擬，通過攝像頭將監(jiān)盤人員在正常工作狀態(tài)下的圖像以及監(jiān)盤人員在異常工作狀態(tài)下的圖像、顯示屏上的參數(shù)在正常狀態(tài)下的圖像以及顯示屏上的參數(shù)在異常狀態(tài)下的圖像進行收集。

2.根據(jù)權(quán)利要求1所述的基于人機雙向的智能監(jiān)盤管理方法，其特征在于，所述獲取訓(xùn)練人員狀態(tài)圖像集合之后還包括：

對所述訓(xùn)練人員狀態(tài)圖像集合中的圖像進行預(yù)處理，得到預(yù)處理后人員狀態(tài)圖像集合；

將所述預(yù)處理后人員狀態(tài)圖像集合中的圖像進行人工標注，得到標注后訓(xùn)練人員狀態(tài)圖像集合。

3.根據(jù)權(quán)利要求1所述的基于人機雙向的智能監(jiān)盤管理方法，其特征在于，所述獲取訓(xùn)練顯示屏狀態(tài)圖像集合之后還包括：

對所述訓(xùn)練顯示屏狀態(tài)圖像集合中的圖像進行預(yù)處理，得到預(yù)處理后訓(xùn)練顯示屏狀態(tài)圖像集合；

將所述預(yù)處理后訓(xùn)練顯示屏狀態(tài)圖像集合中的圖像進行人工標注，得到標注后訓(xùn)練顯示屏狀態(tài)圖像集合。