[發明專利]一種面向救援培訓的行為檢測與效果評價的方法及裝置

在審

• 申請號: 202110656392.7
• 申請日: 2021-06-11
• 公開（公告）號: CN113392758A
• 公開（公告）日: 2021-09-14
• 發明（設計）人: 胡智;石志國
• 申請（專利權）人: 北京科技大學
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/42;G06K9/34;G06Q50/20;G06N3/04
• 代理公司: 北京市廣友專利事務所有限責任公司 11237
• 代理人: 張仲波

本發明涉及圖像識別技術領域，特別是指一種面向救援培訓的行為檢測與效果評價的方法及裝置。方法包括：獲取待識別圖像；將所述待識別圖像輸入到VGG?19卷積神經網絡，獲取特征圖像序列；將所述特征圖像序列輸入Open?pose網絡模型中，通過所述Open?pose網絡模型識別所述待識別圖像15個骨骼點，將所述15個骨骼點的坐標轉化為數字序列；將所述數字序列規范化處理，計算出肢體長度、角度參數，將所述肢體長度以及角度參數傳入三層全連接層，獲取預估計姿態類型；獲取預先存儲的預估計姿態類型對應的樣本骨骼點坐標的數字序列，根據樣本數字序列以及所述待識別圖像對應的數字序列，判斷所述待識別圖像是否達標。采用本發明，造價低、效率高，可以大范圍使用。

技術領域

本發明涉及圖像識別技術領域，特別是指一種面向救援培訓的行為檢測與效果評價的方法及裝置。

背景技術

應急救援指針對突發、具有破壞力的緊急事件采取預防、預備、響應和恢復的活動與計劃。應急救援在災難發生時起到了重要的作用，為人民生活財產安全保駕護航。地震、礦井塌陷、火災、洪水等災難一直威脅著人民生命財產安全，據應急管理部發布的2020年一季度全國自然災害統計數據，包括火災、洪水、地震等各種自然災害已共造成504.8萬人次受災，42人死亡失蹤，2.4萬人緊急轉移安置；1100余間房屋倒塌，13.3萬間房屋損壞。因此應急救援在維護國家安全和人民生命財產安全上有著重大的責任，但是強大的應急救援能力需要強有力的預案和培訓。目前我國的應急救援訓練領域發展較為緩慢，相比較歐美等發達國家應急救援訓練發展較早，但我國近幾年來正在不斷增加應急救援培訓預算，積極開展重大研究項目提高我國應急救援并積極制定救援培訓方案。

目前我國應急救援領域研究多為針對某一訓練項目設計并制作人機交互式物聯網設備，通過穿戴式傳感器獲取到特定的參數信息，如脈搏傳感器、握力傳感器、速度傳感器等等，根據需求設定專門的方案。但是利用硬件設備的方式進行訓練有很多弊端，繁重的傳感器會影響到被訓練人員的動作，限制訓練人員的行動，且硬件設備的檢測指標單一，訓練過程中會需要多種不同的設備，造價較高而且有一定損耗。此外也有部分研究指出利用虛擬技術實現訓練，如利用虛擬現實(VR)技術模擬真實災難場景，讓受訓練成員身臨其境，但是效果較好的VR效果造價很高，不適合大范圍普遍使用。

發明內容

本發明實施例提供了一種面向救援培訓的行為檢測與效果評價的方法及裝置。所述技術方案如下：

一方面，提供了一種面向救援培訓的行為檢測與效果評價的方法，該方法應用于電子設備，該方法包括：

獲取待識別圖像；

將所述待識別圖像輸入到VGG-19卷積神經網絡，獲取特征圖像序列；

將所述特征圖像序列輸入Open-pose網絡模型中，通過所述Open-pose網絡模型識別所述待識別圖像15個骨骼點，將所述15個骨骼點的坐標轉化為數字序列；其中，所述15個骨骼點包括頭部、頸部、左肩部、右肩部、左肘部、右肘部、左手部、右手部、腰中心部、左臀部、右臀部、左膝部、右膝部、左腳部、右腳部；

將所述數字序列規范化處理，計算出肢體長度、角度參數，將所述肢體長度以及角度參數傳入三層全連接層，獲取預估計姿態類型；

獲取預先存儲的預估計姿態類型對應的樣本骨骼點坐標的數字序列，根據所述樣本骨骼點坐標的數字序列以及所述待識別圖像對應的骨骼點坐標的數字序列，判斷所述待識別圖像是否達標。

可選地，所述將所述待識別圖像輸入到VGG-19卷積神經網絡之前，包括：

對所述待識別圖像進行裁剪縮放；

對裁剪縮放后的待識別圖像進行色彩突出。

可選地，所述對所述待識別圖像進行裁剪縮放，包括：