[發明專利]一種多行人跨攝像頭在線跟蹤系統

有效

• 申請號: 201911048719.1
• 申請日: 2019-10-30
• 公開（公告）號: CN110852219B
• 公開（公告）日: 2022-07-08
• 發明（設計）人: 楊軍峰;林鋼鑫;朱貴冬;李歡
• 申請（專利權）人: 廣州海格星航信息科技有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V40/16;G06V10/82;G06N3/04
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 郭浩輝;麥小嬋

1.一種多行人跨攝像頭在線跟蹤系統，其特征在于，包括：

行人檢測模塊，用于實時檢測攝像頭獲取到的視頻畫面中的行人，并實時返回行人檢測信息；其中，所述行人檢測信息包括檢測框、行人Id和行人特征值；

行人檢測模塊，包括檢測框輸出單元；

所述檢測框輸出單元，用于對圖像中行人進行檢測，并返回框取的行人的人體框和人頭框；

人體識別模塊，用于對所述行人檢測信息進行人體特征提取，并將所述人體特征提取的結果與目標庫中的信息進行特征比對，返回比中的目標人體識別結果；

人臉識別模塊，用于對所述行人檢測信息進行人臉檢測，并將所述人臉檢測的結果與人臉目標庫中的信息進行搜索比對，返回比中的目標人臉識別結果；

目標篩選模塊，用于根據所述行人檢測信息將所述目標人體識別結果與所述目標人臉識別結果進行數據融合，同時，對比中的目標進行速度計算并篩選，返回目標篩選結果；

多攝像頭目標融合模塊，用于根據多個攝像頭獲取到的目標位置信息，剔除不正確的目標識別結果，輸出篩選得到的最終目標追蹤信息；其中，所述最終目標追蹤信息包括該目標的行人信息和定位信息；

所述多攝像頭目標融合模塊包括人體識別結果收集單元和離群點剔除單元；其中，

所述人體識別結果收集單元，用于收集同一時間戳不同攝像頭下的人體識別結果，并根據所述人體識別結果的行人Id篩選識別出相同目標的不同攝像頭；

所述離群點剔除單元，用于分別計算不同攝像頭下的目標位置點與其他攝像頭下的目標位置點的平均距離，并將所述平均距離大于預設閾值的攝像頭的識別結果進行剔除。

2.根據權利要求1所述的多行人跨攝像頭在線跟蹤系統，其特征在于，還包括跨攝像頭目標特征搜集模塊，用于獲取目標在不同攝像頭不同朝向的特征值，將該目標的各種特征值進行存儲并實時更新。

3.根據權利要求1所述的多行人跨攝像頭在線跟蹤系統，其特征在于，所述行人檢測模塊還包括圖像獲取單元和檢測信息發送單元；其中

所述圖像獲取單元，用于從網絡消息隊列中實時獲取攝像頭傳入的視頻截圖和圖像信息；

所述檢測信息發送單元，用于將所述行人檢測信息發送到網絡消息隊列中。

4.根據權利要求1所述的多行人跨攝像頭在線跟蹤系統，其特征在于，所述人體識別模塊包括神經網絡模型構建單元、人體特征提取單元、人體識別結果輸出單元；其中，

所述神經網絡模型構建單元，用于根據獲取的行人數據集，構建行人人體識別網絡模型；其中，所述行人數據集包括不同姿態、不同角度、不同光照條件下的人體特征數據；

所述人體特征提取單元，用于根據所述行人檢測信息，利用所述人體識別網絡模型進行行人特征提取，獲取行人特征向量；

所述人體識別結果輸出單元，用于將所述行人特征向量與目標庫中的信息進行特征向量比對，根據馬氏距離進行行人特性向量距離篩選，返回篩選得到的目標人體識別結果。

5.根據權利要求1所述的多行人跨攝像頭在線跟蹤系統，其特征在于，所述人臉識別模塊包括人臉圖像獲取單元、人臉比對單元、人臉識別結果輸出單元；其中，

所述人臉圖像獲取單元，用于獲取每個攝像頭逐幀畫面的行人檢測信息，根據所述行人檢測信息的人頭框進行人臉圖像提取；

所述人臉比對單元，用于將提取的人臉圖像與人臉目標庫中的人臉信息進行搜索對比，根據預設的相似度閾值篩選出比中的目標人臉識別結果；

所述人臉識別結果輸出單元，用于返回所述目標人臉識別結果的行人信息和圖像信息。

6.根據權利要求1所述的多行人跨攝像頭在線跟蹤系統，其特征在于，所述目標篩選模塊包括備選識別結果獲取單元、目標融合單元、目標篩選單元；其中，

所述備選識別結果獲取單元，用于接收同一時間戳的目標人體識別結果和目標人臉識別結果；

所述目標融合單元，用于根據預設的數據融合策略對所述目標人體識別結果和所述目標人臉識別結果進行目標融合；

所述目標篩選單元，用于根據目標的移動速度進行非正常行人識別結果剔除，并返回經過目標融合和目標剔除操作后的目標篩選結果。

7.根據權利要求1所述的多行人跨攝像頭在線跟蹤系統，其特征在于，所述多攝像頭目標融合模塊還包括融合結果輸出單元；其中，

所述融合結果輸出單元，用于輸出進行識別結果剔除后的目標篩選結果。