[發明專利]起立行為檢測方法、裝置、系統及存儲介質

在審

• 申請號: 202011583301.3
• 申請日: 2020-12-28
• 公開（公告）號: CN112580584A
• 公開（公告）日: 2021-03-30
• 發明（設計）人: 王程;章勇;毛曉蛟;曹李軍
• 申請（專利權）人: 蘇州科達科技股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/32;G06K9/46;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 蘇州謹和知識產權代理事務所(特殊普通合伙) 32295
• 代理人: 葉棟

1.一種起立行為檢測方法，其特征在于，所述方法包括：

獲取連續幀視頻圖像；

通過預訓練的目標檢測網絡模型對所述連續幀視頻圖像進行目標檢測，得到每一幀視頻圖像中的目標對象對應的目標位置，及所述目標位置處對應的起坐狀態；

在獲取的連續幀視頻圖像達到預設幀數后，根據目標位置處對應的起坐狀態變化，確定所述目標對象發生起立行為還是坐立行為。

2.根據權利要求1所述的方法，其特征在于，所述目標檢測網絡模型為基于anchor-free算法的FCOS網絡模型，所述通過預訓練的目標檢測網絡模型對所述連續幀視頻圖像進行目標檢測，包括：

分別提取每一幀視頻圖像不同尺度的圖像特征；

分別對各幀所述視頻圖像對應的所述不同尺度的圖像特征進行特征融合，得到每一幀視頻圖像融合后的圖像特征；

根據所述融合后的圖像特征，分別預測得到每一幀視頻圖像的目標框及對應的標簽；

其中，所述目標框指示所述目標位置，所述標簽指示所述目標位置處對應的起坐狀態為站立或坐立。

3.根據權利要求2所述的方法，其特征在于，所述在獲取的連續幀視頻圖像達到預設幀數后，根據目標位置處對應的起坐狀態變化，確定所述目標位置處發生起立行為還是坐立行為，包括：

將當前幀視頻圖像中檢測到的每個目標框，分別與前一幀視頻圖像中檢測到的各目標框進行信息匹配運算，分別得到前一幀視頻圖像中與當前幀視頻圖像中各個目標框相匹配的目標框；所述相匹配的目標框在當前幀視頻圖像和前一幀視頻圖像中指示同一目標對象對應的目標位置；

在預設幀數的連續幀視頻圖像中，根據指示同一目標對象對應的目標位置的目標框標簽變化，判定相應目標對象發生起立行為還是坐立行為。

4.根據權利要求3所述的方法，其特征在于，所述將當前幀視頻圖像中檢測到的每個目標框，分別與前一幀視頻圖像中檢測到的各目標框進行信息匹配運算，包括：

獲取所述當前幀視頻圖像及所述前一幀視頻圖像中每個目標框的左下角坐標；

分別計算所述當前幀視頻圖像中各個目標框的左下角坐標與所述前一幀視頻圖像中各個目標框的左下角坐標的歐氏距離；

將所述前一幀視頻圖像中與所述當前幀視頻圖像中的當前目標框的所述歐氏距離最短的目標框，確定為與所述當前目標框相匹配的目標框。

5.根據權利要求3所述的方法，其特征在于，所述在預設幀數的連續幀視頻圖像中，根據指示同一目標對象的目標位置的目標框標簽變化，判定相應目標對象發生起立行為還是坐立行為，包括：

若所述指示同一目標對象的目標位置的目標框標簽從指示坐立狀態開始，在預設的連續m幀視頻圖像中，檢測到有n幀指示為站立狀態，則判定所述目標框指示的目標對象發生起立行為；

在起立行為保持狀態下，若所述目標框在預設連續m幀視頻圖像中，檢測到有n幀指示為坐立狀態，則判定起立行為結束，所述目標框指示的目標對象發生坐立行為；其中，mn，且n/m大于預設比值。

6.根據權利要求2所述的方法，其特征在于，所述確定所述目標對象發生起立行為還是坐立行為之后，還包括：

若確定當前目標對象發生起立行為，則輸出與所述當前目標對象對應的目標框的位置坐標；

其中，所述目標框的位置坐標用于指示特寫鏡頭的切換位置。

7.一種起立行為檢測裝置，其特征在于，所述裝置包括：

圖像獲取模塊，用于獲取連續幀視頻圖像；

目標檢測模塊，用于通過預訓練的目標檢測網絡模型對所述連續幀視頻圖像進行目標檢測，得到每一幀視頻圖像中的目標對象對應的目標位置及所述目標位置處對應的起坐狀態；

行為判定模塊，用于在獲取的連續幀視頻圖像達到預設幀數后，根據目標位置處對應的起坐狀態變化，確定所述目標對象發生起立行為還是坐立行為。