[發(fā)明專利]行為檢測方法及裝置

有效

• 申請?zhí)枺?/td>: 201911337432.0
• 申請日: 2019-12-23
• 公開（公告）號: CN111126257B
• 公開（公告）日: 2023-08-11
• 發(fā)明（設(shè)計）人: 顧志強(qiáng);倪楓
• 申請（專利權(quán)）人: 上海商湯智能科技有限公司
• 主分類號: G06V40/20
• 分類號: G06V40/20;G06V20/52;G06V10/40;G06V10/74;G06V10/82
• 代理公司: 北京中知恒瑞知識產(chǎn)權(quán)代理有限公司 11889
• 代理人: 王文紅

1.一種行為檢測方法，其特征在于，包括：

獲取監(jiān)控區(qū)域內(nèi)的監(jiān)控圖像；所述監(jiān)控圖像中包括至少一個通過監(jiān)控區(qū)域的目標(biāo)對象；

從所述監(jiān)控圖像中提取每個所述目標(biāo)對象的關(guān)鍵點；

確定所述關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息；

基于每個目標(biāo)對象對應(yīng)的關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息，確定每個所述目標(biāo)對象是否存在預(yù)設(shè)行為；

其中，所述確定所述關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息，包括：

確定所述監(jiān)控區(qū)域所在的第一平面；

確定所述關(guān)鍵點所在的第二平面；

基于所述第一平面與所述第二平面之間的變換關(guān)系信息、以及所述監(jiān)控區(qū)域在所述第一平面中的坐標(biāo)信息，確定所述關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息。

2.根據(jù)權(quán)利要求1所述的行為檢測方法，其特征在于，所述基于所述第一平面與所述第二平面之間的變換關(guān)系信息、以及所述監(jiān)控區(qū)域在所述第一平面中的坐標(biāo)信息，確定所述關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息，包括：

基于所述第一平面與所述第二平面之間的變換關(guān)系信息、所述監(jiān)控區(qū)域在第一平面中的坐標(biāo)信息，確定所述監(jiān)控區(qū)域在所述第二平面中的坐標(biāo)信息；

基于所述關(guān)鍵點在所述第二平面中的坐標(biāo)信息和所述監(jiān)控區(qū)域在所述第二平面中的坐標(biāo)信息，確定所述關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息。

3.根據(jù)權(quán)利要求1所述的行為檢測方法，其特征在于，所述基于所述第一平面與所述第二平面之間的變換關(guān)系信息、以及所述監(jiān)控區(qū)域在所述第一平面中的坐標(biāo)信息，確定所述關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息，包括：

基于所述第一平面與所述第二平面之間的變換關(guān)系信息、所述關(guān)鍵點在所述第二平面中的坐標(biāo)信息，確定所述關(guān)鍵點在所述第一平面中的坐標(biāo)信息；

基于所述關(guān)鍵點在所述第一平面中的坐標(biāo)信息和所述監(jiān)控區(qū)域在第一平面中的坐標(biāo)信息，確定所述關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息。

4.根據(jù)權(quán)利要求1至3任一項所述的行為檢測方法，其特征在于，所述從所述監(jiān)控圖像中提取每個所述目標(biāo)對象的關(guān)鍵點，包括：

針對每個目標(biāo)對象，提取該目標(biāo)對象的多個關(guān)鍵點集合；其中，每個關(guān)鍵點集合包括該目標(biāo)對象的各個預(yù)設(shè)的部位的關(guān)鍵點；

確定每個關(guān)鍵點集合的置信度；

基于置信度最高的關(guān)鍵點集合與其他關(guān)鍵點集合之間的姿態(tài)相似度，確定每個所述目標(biāo)對象的關(guān)鍵點。

5.根據(jù)權(quán)利要求4所述的行為檢測方法，其特征在于，所述基于置信度最高的關(guān)鍵點集合與其他關(guān)鍵點集合之間的姿態(tài)相似度，確定每個所述目標(biāo)對象的關(guān)鍵點，包括：

將所述置信度最高的關(guān)鍵點集合中目標(biāo)部位的關(guān)鍵點作為其中一個目標(biāo)對象的關(guān)鍵點；

將所述置信度最高的關(guān)鍵點集合，以及，與所述置信度最高的關(guān)鍵點集合的姿態(tài)相似度大于預(yù)設(shè)閾值的關(guān)鍵點集合剔除；

基于剩余關(guān)鍵點集合中置信度最高的關(guān)鍵點集合，與剩余關(guān)鍵點集合中其他關(guān)鍵點集合之間的姿態(tài)相似度，確定其他目標(biāo)對象的關(guān)鍵點。

6.根據(jù)權(quán)利要求1至3任一項所述的行為檢測方法，其特征在于，所述從所述監(jiān)控圖像中提取每個所述目標(biāo)對象的關(guān)鍵點，包括：

針對每個目標(biāo)對象，提取該目標(biāo)對象的目標(biāo)部位的輪廓；

確定所述輪廓的中心點；

將確定的所述中心點作為該目標(biāo)對象的關(guān)鍵點。

7.根據(jù)權(quán)利要求1所述的行為檢測方法，其特征在于，所述基于每個目標(biāo)對象對應(yīng)的關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息，確定每個所述目標(biāo)對象是否存在預(yù)設(shè)行為，包括：

針對每個目標(biāo)對象，基于該目標(biāo)對象對應(yīng)的關(guān)鍵點在所述監(jiān)控區(qū)域內(nèi)的位置信息，確定該目標(biāo)對象與監(jiān)控區(qū)域的入口的第一距離，以及該目標(biāo)對象與監(jiān)控區(qū)域的出口的第二距離；

若所述第一距離或所述第二距離小于第一預(yù)設(shè)距離閾值，則，確定該目標(biāo)對象不存在預(yù)設(shè)行為。