[發明專利]基于人工智能算法的多人行為識別方法及裝置

有效

• 申請號: 201811193323.1
• 申請日: 2018-10-14
• 公開（公告）號: CN109389089B
• 公開（公告）日: 2022-03-08
• 發明（設計）人: 趙景程
• 申請（專利權）人: 深圳市能信安科技股份有限公司
• 主分類號: G06V40/20
• 分類號: G06V40/20;G06V10/82;G06N3/04
• 代理公司: 北京圣達博通知識產權代理事務所(普通合伙) 11675
• 代理人: 馬皓

1.基于人工智能算法的多人行為識別方法，其特征在于，包括：

接收待處理圖像信息，所述待處理圖像信息包括視頻和連續圖像；

檢測所述待處理圖像信息所包括的每幀圖像中所有人的位置坐標；

將所述每幀圖像中所有人中的同一個人進行關聯，得出所述待處理圖像信息中每個人對應連續N幀畫面中的位置坐標；對于每個人，基于該人對應的連續N幀畫面中的位置坐標，對該人對應的連續N幀畫面中的位置坐標所對應的圖像，計算所述每個人在時間維度和空間維度上能夠區分其他人的特征圖，得到該人對應的時空特征圖，其中N為正整數，N取值為不小于計算一次所述每個人的特征圖所需圖像的數量；

基于所述每個人對應的時空特征圖提取所述每個人對應的候選時序；

對于每個人，根據所述候選時序從所述候選時序對應人的時空特征圖中提取所述候選時序對應的特征圖；

根據所述候選時序對應的特征圖確定所述候選時序對應人的行為，以及根據所述候選時序對應的特征圖和所述候選時序對應人的連續N幀畫面中的位置坐標確定所述行為發生位置坐標，以及根據所述候選時序確定所述候選時序對應人的行為發生時間。

2.根據權利要求1所述的方法，其特征在于，所述基于所述每個人對應的時空特征圖提取所述每個人對應的候選時序，包括：

通過預設候選時序和所述每個人對應的時空特征圖提取所述每個人對應的第一候選時序，所述預設候選時序為根據人的行為規律預先估計的候選時序；

基于非極大值抑制算法從所述第一候選時序中確定出所述每個人對應的候選時序。

3.根據權利要求1所述的方法，其特征在于，所述根據所述候選時序對應的特征圖確定所述候選時序對應人的行為，包括：

對所述候選時序對應的特征圖進行池化；

根據池化后的特征圖和預設行為分類器確定所述候選時序對應人的行為。

4.根據權利要求1所述的方法，其特征在于，所述每個人對應連續N幀畫面中的位置坐標包括每個人對應多個連續N幀畫面中的位置坐標；

對于每個人，所述對該人對應的連續N幀畫面中的位置坐標所對應的圖像，計算所述每個人在時間維度和空間維度上能夠區分其他人的特征圖，得到該人對應的時空特征圖，包括：

基于每個人對應多個連續N幀畫面中的位置坐標，計算所述每個人對應的多個時空特征圖。

5.基于人工智能算法的多人行為識別裝置，其特征在于，包括：

接收單元，用于接收待處理圖像信息，所述待處理圖像信息包括視頻和連續圖像；

檢測單元，用于檢測所述待處理圖像信息所包括的每幀圖像中所有人的位置坐標，將所述每幀圖像中所有人中的同一個人進行關聯，得出所述待處理圖像信息中每個人對應連續N幀畫面中的位置坐標；

計算單元，用于對于每個人，基于該人對應連續N幀畫面中的位置坐標，對該人對應的連續N幀畫面中的位置坐標所對應的圖像，計算所述每個人在時間維度和空間維度上能夠區分其他人的特征圖，得到該人對應的時空特征圖，其中N為正整數，N取值為不小于計算一次所述每個人的特征圖所需圖像的數量；

提取單元，用于基于所述每個人對應的時空特征圖提取所述每個人對應的候選時序；

所述提取單元，還用于對于每個人，根據所述候選時序從所述候選時序對應人的時空特征圖中提取所述候選時序對應的特征圖；

確定單元，用于根據所述候選時序對應的特征圖確定所述候選時序對應人的行為，以及根據所述候選時序對應的特征圖和所述候選時序對應人的連續N幀畫面中的位置坐標確定所述行為發生位置坐標，以及根據所述候選時序確定所述候選時序對應人的行為發生時間。

6.根據權利要求5所述的裝置，其特征在于，所述提取單元，具體用于：

通過預設候選時序和所述每個人對應的時空特征圖提取所述每個人對應的第一候選時序，預設候選時序為根據人的行為規律預先估計的候選時序；

基于非極大值抑制算法從所述第一候選時序中確定出所述每個人對應的候選時序。