[發明專利]一種安全監控方法、裝置、設備和存儲介質

在審

• 申請號: 202110694168.7
• 申請日: 2021-06-22
• 公開（公告）號: CN113408435A
• 公開（公告）日: 2021-09-17
• 發明（設計）人: 崔子棟;吳毳;李津軒;姜峰
• 申請（專利權）人: 華僑大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 廈門智慧呈睿知識產權代理事務所(普通合伙) 35222
• 代理人: 陳曉思

1.一種安全監控方法，其特征在于，包含：

接收目標區域的不同角度的多個監控視頻；

根據多個所述監控視頻，分別獲取所述目標區域中的各個人物的圖像序列；

根據所述圖像序列，獲取各個所述人物的身體姿態、面部表情序列和手勢序列，并進行回歸分析，以獲得各個所述人物的安全系數；

根據各個所述安全系數，生成相應的安全報警等級。

2.根據權利要求1所述的安全監控方法，其特征在于，根據多個所述監控視頻，分別獲取所述目標區域中的各個人物的圖像序列，具體為：

根據多個所述監控視頻，通過OpenPose模型獲取所述目標區域中的各個人物的不同角度的骨架信息；

根據所述骨架信息，獲取各個所述人物所在的圖像區域；其中，所述圖像區域為各個所述人物的骨架面積最大的圖像所在的區域；

根據所述圖像區域，從多個所述監控視頻中，分別提取各個所述人物的圖像序列。

3.根據權利要求2所述的安全監控方法，其特征在于，根據所述圖像序列，獲取各個所述人物的身體姿態，具體為：

根據所述圖像序列，獲取關節點數據，并建立人體骨骼模型；其中，所述關節點數據包括頭部、頸部關節、軀干關節、右肩關節、右肘關節、右腕關節、左肩關節、左肘關節、左腕關節、右踝關節、左膝關節、左踝關節、左髖關節、左膝關節和左踝關節；

根據所述人體骨骼模型，以軀干關節為原點，軀干關節指向頸部關節為Z軸，左肩關節指向右肩關節為x軸，人體朝向方向為Y軸建立人體動態坐標系；

根據所述人體動態坐標系，將各個關節的坐標根據身高進行歸一化處理后，計算身體參數；其中，所述參數包括身高、頭到x軸的第一距離、右腳到x軸的第二距離、左腳到x軸的第三距離、身體傾斜角度、腳部角速度、肩部中心角速度和矩信息；

根據所述身體參數，通過SVM模型進行分類，以獲得所述圖像序列中人物的所述身體姿態。

4.根據權利要求1所述的安全監控方法，其特征在于，根據所述圖像序列，獲取各個所述人物的面部表情序列，具體為：

通過人臉檢測模型，獲得所述圖像序列中的人臉區域；

通過表情識別模型，獲得所述人臉區域中的表情信息；

根據所述圖像序列的時間順序和所述表情信息，生成初始表情序列；

根據所述初始表情序列，通過預測模型進行校正，以獲得所述面部表情序列。

5.根據權利要求1所述的安全監控方法，其特征在于，根據所述圖像序列，獲取各個所述人物的手部動作序列，具體為：

基于終端輕量化神經網絡模型，構建物體檢測模型；

通過所述物體檢測模型，提取所述圖像序列中的手部圖像，并根據所述圖像序列的時間生成手部圖像序列；

根據所述手部圖像序列，通過圖像分類模型進行分類，以獲得所述手勢序列。

6.根據權利要求1至5任一項所述的安全監控方法，其特征在于，根據各個所述安全系數，生成相應的安全報警等級，具體為：

根據各個所述安全系數，計算所述目標區域中小于預設的安全系數閾值的人數、安全系數的第一平均值和相鄰場景的安全系數第二平均值；

將所述人數、第一平均值和第二平均值，按照時間順序排列成時序特征；

根據所述時序特征，通過預測模型進行預測，以獲得所述安全報警等級。

7.一種安全監控裝置，其特征在于，包含：

視頻模塊，用于接收目標區域的不同角度的多個監控視頻；

圖像模塊，用于根據多個所述監控視頻，分別獲取所述目標區域中的各個人物的圖像序列；

系數模塊，用于根據所述圖像序列，獲取各個所述人物的身體姿態、面部表情序列和手勢序列，并進行回歸分析，以獲得各個所述人物的安全系數；

等級模塊，用于根據各個所述安全系數，生成相應的安全報警等級。