[發(fā)明專利]一種行為檢測方法、裝置及設(shè)備

有效

• 申請?zhí)枺?/td>: 202010713953.8
• 申請日: 2020-07-23
• 公開（公告）號: CN111738216B
• 公開（公告）日: 2021-09-21
• 發(fā)明（設(shè)計(jì)）人: 張軼君;朱玉榮
• 申請（專利權(quán)）人: 安徽文香科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06K9/62
• 代理公司: 北京集佳知識產(chǎn)權(quán)代理有限公司 11227
• 代理人: 郭化雨

1.一種行為檢測方法，其特征在于，包括：

獲取第一圖像的第一整體特征向量，獲取所述第一圖像中第一人物的第一個人特征向量，所述第一圖像為集體活動的圖像；所述第一整體特征向量，用于體現(xiàn)所述第一圖像中的多個人物的整體行為信息；所述第一整體特征向量是通過將所述第一圖像輸入至目標(biāo)模型的全局特征提取層得到的；所述第一個人特征向量是通過將所述第一圖像輸入到所述目標(biāo)模型的局部特征提取層得到的；

其中，所述目標(biāo)模型包括全局特征提取層、局部特征提取層和全連接層，所述全局特征提取層用于提取所述第一圖像的全局特征，獲得所述第一圖像的整體特征向量；所述局部特征提取層用于提取所述第一圖像中所述第一人物的個人特征向量；所述全連接層用于根據(jù)所述整體特征向量和所述個人特征向量確定所述第一圖像中所述第一人物的檢測結(jié)果；所述目標(biāo)模型為根據(jù)訓(xùn)練數(shù)據(jù)和所述訓(xùn)練數(shù)據(jù)對應(yīng)的已知檢測結(jié)果訓(xùn)練得到的；

根據(jù)所述第一整體特征向量和所述第一個人特征向量，確定所述第一人物在所述集體活動的第一檢測結(jié)果，所述第一檢測結(jié)果用于表征所述第一人物在所述集體活動中所述第一圖像對應(yīng)時刻的表現(xiàn)；所述第一檢測結(jié)果是將所述第一整體特征向量和所述第一個人特征向量進(jìn)行處理，得到目標(biāo)特征向量，將所述目標(biāo)特征向量輸入到所述目標(biāo)模型的全連接層得到的；

其中，所述集體活動的視頻包括所述第一圖像和第二圖像，所述方法還包括：

獲取所述第二圖像的第二整體特征向量，獲取所述第二圖像中第一人物的第三個人特征向量；所述第二整體特征向量是通過將所述第二圖像輸入至所述目標(biāo)模型的全局特征提取層得到的；所述第三個人特征向量是通過將所述第二圖像輸入到所述目標(biāo)模型的局部特征提取層得到的；

根據(jù)所述第二整體特征向量和所述第三個人特征向量，確定所述第一人物在所述集體活動的第三檢測結(jié)果，所述第三檢測結(jié)果用于表征所述第一人物在所述集體活動中所述第二圖像對應(yīng)時刻的表現(xiàn)；所述第三檢測結(jié)果是將所述第二整體特征向量和所述第三個人特征向量進(jìn)行處理，得到目標(biāo)特征向量，將所述目標(biāo)特征向量輸入到所述目標(biāo)模型的全連接層得到的；

根據(jù)所述第一檢測結(jié)果和所述第三檢測結(jié)果，確定所述第一人物在所述集體活動的第二目標(biāo)檢測結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取所述第一圖像中第一人物的第一個人特征向量之前，所述方法還包括：

從所述第一圖像中檢測所述第一人物；

從所述第一圖像中截取包括所述第一人物的部分，獲得第一子圖像；

所述獲取所述第一圖像中第一人物的第一個人特征向量，包括：

根據(jù)所述第一子圖像獲取所述第一人物的所述第一個人特征向量。

3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述第一圖像中還包括第二人物，所述方法還包括：

獲取所述第一圖像中所述第二人物的第二個人特征向量；

根據(jù)所述第一整體特征向量和所述第二個人特征向量，確定所述第二人物在所述集體活動的第二檢測結(jié)果，所述第二檢測結(jié)果用于表征所述第二人物在所述集體活動中所述第一圖像對應(yīng)時刻的表現(xiàn)。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述方法還包括：

根據(jù)所述第一檢測結(jié)果和所述第二檢測結(jié)果，確定所述第一圖像對應(yīng)時刻所述集體活動的第一目標(biāo)檢測結(jié)果。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述方法還包括：

響應(yīng)于用戶的第一請求，顯示所述集體活動在所述第一圖像對應(yīng)時刻的所述第一目標(biāo)檢測結(jié)果。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

響應(yīng)于用戶的第二請求，顯示所述第一人物在所述集體活動的所述第二目標(biāo)檢測結(jié)果。