[發(fā)明專利]行為檢測的方法、系統(tǒng)、設(shè)備和計(jì)算機(jī)設(shè)備

在審

• 申請?zhí)枺?/td>: 202010597281.9
• 申請日: 2020-06-28
• 公開（公告）號: CN111881754A
• 公開（公告）日: 2020-11-03
• 發(fā)明（設(shè)計(jì)）人: 孫鶴;潘華東;殷俊;張興明;彭志蓉
• 申請（專利權(quán)）人: 浙江大華技術(shù)股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 杭州華進(jìn)聯(lián)浙知識產(chǎn)權(quán)代理有限公司 33250
• 代理人: 金無量

1.一種行為檢測的方法，其特征在于，所述方法包括：

在連續(xù)的多幀圖像中，通過關(guān)鍵點(diǎn)檢測模型，獲取每一幀圖像中目標(biāo)人體的關(guān)鍵點(diǎn)信息；

根據(jù)所述關(guān)鍵點(diǎn)信息獲取所述關(guān)鍵點(diǎn)的相對位置關(guān)系，根據(jù)所述相對位置關(guān)系，確定所述目標(biāo)人體在每一幀圖像中對應(yīng)的子行為；

在所述連續(xù)的多幀圖像的所述子行為均為同一行為的情況下，確定所述目標(biāo)人體的行為檢測結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述關(guān)鍵點(diǎn)信息獲取所述關(guān)鍵點(diǎn)的相對位置關(guān)系，根據(jù)所述相對位置關(guān)系，確定所述目標(biāo)人體在每一幀圖像中對應(yīng)的子行為包括：

獲取第一幀圖像和第二幀圖像中的所述關(guān)鍵點(diǎn)信息，其中，所述關(guān)鍵點(diǎn)包括所述目標(biāo)人體的上半身關(guān)鍵點(diǎn)和下半身關(guān)鍵點(diǎn)；

根據(jù)所述關(guān)鍵點(diǎn)信息，在所述第二幀圖像中的所述上半身關(guān)鍵點(diǎn)均高于所述第一幀圖像中的所述上半身關(guān)鍵點(diǎn)，且在所述第二幀圖像中，所述下半身關(guān)鍵點(diǎn)構(gòu)成三角形的情況下，判定所述目標(biāo)人體在所述第二幀圖像中的子行為是下蹲。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述關(guān)鍵點(diǎn)信息獲取所述關(guān)鍵點(diǎn)的相對位置關(guān)系，根據(jù)所述相對位置關(guān)系，確定所述目標(biāo)人體在每一幀圖像中對應(yīng)的子行為還包括：

獲取第三幀圖像和第四幀圖像中的所述關(guān)鍵點(diǎn)信息，其中，所述關(guān)鍵點(diǎn)包括所述目標(biāo)人體的膝蓋和腳踝；

根據(jù)所述關(guān)鍵點(diǎn)信息，在所述第四幀圖像中的膝蓋和腳踝分別低于所述第三幀圖像中的膝蓋和腳踝的情況下，判定所述目標(biāo)人體在所述第四幀圖像中的行為是跨越。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取每一幀圖像中目標(biāo)人體的關(guān)鍵點(diǎn)信息包括：

通過單目相機(jī)，根據(jù)行人目標(biāo)人體檢測算法，獲取所述目標(biāo)人體的二維圖像信息，根據(jù)所述二維圖像信息獲取所述關(guān)鍵點(diǎn)信息。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述確定所述目標(biāo)人體的行為檢測結(jié)果之后，所述方法還包括：

在所述檢測結(jié)果為下蹲或者跨越的情況下，對所述目標(biāo)人體進(jìn)行標(biāo)記，發(fā)出警示信號。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，還包括：

獲取目標(biāo)人體場景中的多個(gè)樣本圖像，對所述樣本圖像進(jìn)行行為標(biāo)注，通過深度學(xué)習(xí)框架對所述行為標(biāo)注后的樣本圖像進(jìn)行訓(xùn)練，得到所述關(guān)鍵點(diǎn)檢測模型。

7.一種行為檢測的系統(tǒng)，其特征在于，所述系統(tǒng)包括攝像裝置和處理器；

所述攝像裝置獲取目標(biāo)人體的連續(xù)的多幀圖像，在所述連續(xù)的多幀圖像中，所述處理器通過關(guān)鍵點(diǎn)檢測模型，獲取每一幀圖像中所述目標(biāo)人體的關(guān)鍵點(diǎn)信息；

所述處理器根據(jù)所述關(guān)鍵點(diǎn)信息獲取所述關(guān)鍵點(diǎn)的相對位置關(guān)系，根據(jù)所述相對位置關(guān)系，確定所述目標(biāo)人體在每一幀圖像中對應(yīng)的子行為；

在所述連續(xù)的多幀圖像的所述子行為均為同一行為的情況下，所述處理器確定所述目標(biāo)人體的行為檢測結(jié)果。

8.一種行為檢測的設(shè)備，其特征在于，所述設(shè)備包括：獲取模塊、計(jì)算模塊和確定模塊：

所述獲取模塊，用于在連續(xù)的多幀圖像中，通過關(guān)鍵點(diǎn)檢測模型，獲取每一幀圖像中目標(biāo)人體的關(guān)鍵點(diǎn)信息；

所述計(jì)算模塊，用于根據(jù)所述關(guān)鍵點(diǎn)信息獲取所述關(guān)鍵點(diǎn)的相對位置關(guān)系，根據(jù)所述相對位置關(guān)系，確定所述目標(biāo)人體在每一幀圖像中對應(yīng)的子行為；

所述確定模塊，用于在所述連續(xù)的多幀圖像的所述子行為均為同一行為的情況下，確定所述目標(biāo)人體的行為檢測結(jié)果。

9.一種計(jì)算機(jī)設(shè)備，包括存儲器、處理器以及存儲在所述存儲器上并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)如權(quán)利要求1至6中任一項(xiàng)所述方法的步驟。

10.一種計(jì)算機(jī)可讀存儲介質(zhì)，其上存儲有計(jì)算機(jī)程序，其特征在于，該程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至6中任一項(xiàng)所述方法的步驟。