[發明專利]一種行為檢測方法、裝置及設備

有效

• 申請號: 202011260947.8
• 申請日: 2020-11-12
• 公開（公告）號: CN112380971B
• 公開（公告）日: 2023-08-25
• 發明（設計）人: 趙飛
• 申請（專利權）人: 杭州?？低晹底旨夹g股份有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 楊春香

本申請提供一種行為檢測方法、裝置及設備，該方法包括：獲取待檢測視頻，待檢測視頻包括多個待檢測圖像；從多個待檢測圖像中選取同一目標對象的多個目標待檢測圖像，基于多個目標待檢測圖像獲取目標對象的切片序列；根據所述切片序列獲取目標對象的多個行為特征；針對每個行為特征，基于指定類型行為對應的多個類簇中心特征，確定所述行為特征與每個類簇中心特征的相似度；基于所述行為特征與每個類簇中心特征的相似度從所述多個類簇中心特征中選取目標類簇中心特征；基于所述多個行為特征對應的目標類簇中心特征確定待檢測視頻存在所述指定類型行為，或待檢測視頻不存在所述指定類型行為。通過本申請的技術方案，視頻行為檢測的準確性高。

技術領域

本申請涉及視頻監控技術領域，尤其涉及一種行為檢測方法、裝置及設備。

背景技術

視頻是連續的圖像序列，由連續的圖像構成。由于人眼的視覺暫留效應，當視頻以一定速率播放時，人眼看到的就是動作連續的圖像序列。

視頻行為序列合規性檢測是一種分析目標行為是否符合規范的智能分析手段，用于判斷視頻中的目標行為序列是否合規。視頻行為序列合規性檢測技術可以廣泛應用于安防監控領域、人機交互領域、智能園區、智慧課堂、智慧農場等應用場景。例如，視頻行為序列合規性檢測技術可以檢測工業生產流程中操作員的行為序列是否符合標準行為規范，檢測廚師的行為序列是否符合餐飲規范，檢測動物攝食動作序列是否合規，檢測學生化學實驗操作是否合規等。

在相關技術中，視頻行為序列合規性檢測技術存在檢測準確性不高，檢測方式復雜等問題，缺少可以通用的視頻行為序列合規性檢測技術。

發明內容

本申請提供一種行為檢測方法，所述方法包括：

獲取待檢測視頻，所述待檢測視頻包括多個待檢測圖像；

從所述多個待檢測圖像中選取同一目標對象的多個目標待檢測圖像，基于所述多個目標待檢測圖像獲取所述目標對象的切片序列，所述切片序列包括基于所述目標對象的目標框位置從所述多個目標待檢測圖像中截取的子圖像；

根據所述切片序列獲取所述目標對象的多個行為特征；

針對每個行為特征，基于指定類型行為對應的多個類簇中心特征，確定所述行為特征與每個類簇中心特征的相似度；基于所述行為特征與每個類簇中心特征的相似度從所述多個類簇中心特征中選取目標類簇中心特征；

基于所述多個行為特征對應的目標類簇中心特征確定所述待檢測視頻存在所述指定類型行為，或所述待檢測視頻不存在所述指定類型行為。

示例性的，所述基于所述多個行為特征對應的目標類簇中心特征確定所述待檢測視頻存在所述指定類型行為，或所述待檢測視頻不存在所述指定類型行為，包括：若所述多個行為特征對應的目標類簇中心特征與所述多個類簇中心特征完全相同，且所述多個行為特征對應的目標類簇中心特征的順序與所述多個類簇中心特征的順序匹配，則確定所述待檢測視頻存在所述指定類型行為；

否則，確定所述待檢測視頻不存在所述指定類型行為；

其中，所述多個行為特征對應的目標類簇中心特征的順序與所述多個行為特征的時間先后順序匹配；所述指定類型行為包括多個子行為，子行為的數量與類簇中心特征的數量相同，所述多個子行為與所述多個類簇中心特征一一對應，所述多個類簇中心特征的順序與所述多個子行為的發生順序匹配。

示例性的，所述從所述多個待檢測圖像中選取同一目標對象的多個目標待檢測圖像，包括：對所述多個待檢測圖像中的特定目標進行目標檢測，得到特定目標在多個候選待檢測圖像中的對象位置；候選待檢測圖像是所述多個待檢測圖像中存在特定目標的待檢測圖像，所述特定目標包括至少一個目標對象；

對所述多個候選待檢測圖像中的同一個目標對象進行目標跟蹤，得到所述目標對象在多個目標待檢測圖像中的對象位置；目標待檢測圖像是所述多個候選待檢測圖像中存在所述目標對象的待檢測圖像。