[發明專利]目標行為檢測方法、裝置、設備及存儲介質

有效

• 申請號: 202110604913.4
• 申請日: 2021-05-31
• 公開（公告）號: CN113361364B
• 公開（公告）日: 2022-11-01
• 發明（設計）人: 胡超凡;趙代平;李展鵬;孫德乾;孔祥暉
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06T7/246;G06T7/269
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 靳玫

本公開涉及計算機視覺技術領域，具體涉及一種目標行為檢測方法、裝置、設備及存儲介質。目標行為檢測方法，包括：獲取第一時段的第一視頻流數據；其中，第一視頻流數據中包括至少一個目標對象；對第一視頻流數據進行檢測，預測得到第二時段目標對象的第一行為信息；在時序上，第二時段與第一時段相鄰且位于第一時段之后，或者，第二時段的前段與第一時段的后段存在重疊，第一行為信息為目標對象的預測行為信息；根據實時獲取的當前視頻幀數據，檢測得到目標對象的第二行為信息；響應于第一行為信息和第二行為信息的差異滿足預設條件，確定目標對象出現目標行為。本公開方法可將目標行為檢測時間提前，提前預警，降低檢測滯后帶來的風險。

技術領域

本公開涉及計算機視覺技術領域，具體涉及一種目標行為檢測方法、裝置、設備及存儲介質。

背景技術

目前，基于計算機視覺(Computer vision)的目標行為檢測被廣泛應用于各種場景中。但是，相關技術中，往往只能在目標行為發生后，基于采集圖像中目標的相關動作分析確定目標行為的發生，具有滯后性，對于溺水等危險場景監測的適用性較差。

發明內容

本公開提供了一種目標行為檢測方法、裝置、設備及存儲介質，以解決現有技術中因檢測滯后而引發的危險場景監測適用性較差的問題。

第一方面，本公開實施方式提供了一種目標行為檢測方法，包括：

獲取第一時段的第一視頻流數據；其中，所述第一視頻流數據中包括至少一個目標對象；

對所述第一視頻流數據進行檢測，預測得到第二時段所述目標對象的第一行為信息；在時序上，所述第二時段與所述第一時段相鄰且位于所述第一時段之后，或者，所述第二時段的前段與所述第一時段的后段存在重疊，所述第一行為信息為所述目標對象的預測行為信息；

根據實時獲取的當前視頻幀數據，檢測得到所述目標對象的第二行為信息；

響應于所述第一行為信息和所述第二行為信息的差異滿足預設條件，確定所述目標對象出現目標行為。

在一些實施方式中，所述對所述第一視頻流數據進行檢測，預測得到第二時段所述目標對象的第一行為信息，包括：

對所述第一視頻流數據進行特征提取，得到所述目標對象的對象特征和光流特征；

基于所述對象特征和所述光流特征，得到所述目標對象的行為特征信息；

根據行為特征信息，得到所述第一行為信息。

在一些實施方式中，所述目標對象的行為信息包括位移變化信息和速度變化信息；

所述響應于所述第一行為信息和所述第二行為信息的差異滿足預設條件，確定所述目標對象出現目標行為，包括：

響應于所述第一行為信息的第一位移變化信息與所述第二行為信息的第二位移變化信息的差異不小于預設位移閾值，和/或，所述第一行為信息的第一速度變化信息與所述第二行為信息的第二速度變化信息的差異不小于預設速度閾值，確定目標對象出現所述目標行為。

在一些實施方式中，所述對所述第一視頻流數據進行檢測，預測得到第二時段所述目標對象的第一行為信息，包括：

對所述第一視頻流數據進行特征提取，得到所述目標對象的對象特征和光流特征；

基于所述對象特征，確定所述第一視頻流數據包括的每幀圖像中所述目標對象的位置信息，基于相鄰幀圖像之間的位置信息變化，確定所述第一位移變化信息；

基于所述光流特征，確定所述每幀圖像中所述目標對象的速度信息，基于相鄰幀圖像之間的速度信息變化，確定所述第一速度變化信息。

在一些實施方式中，所述根據實時獲取的當前視頻幀數據，檢測得到所述目標對象的第二行為信息，包括：