[發(fā)明專利]一種多行人跨攝像頭在線跟蹤系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201911048719.1
• 申請日: 2019-10-30
• 公開（公告）號: CN110852219B
• 公開（公告）日: 2022-07-08
• 發(fā)明（設(shè)計(jì)）人: 楊軍峰;林鋼鑫;朱貴冬;李歡
• 申請（專利權(quán)）人: 廣州海格星航信息科技有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V40/16;G06V10/82;G06N3/04
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 郭浩輝;麥小嬋

1.一種多行人跨攝像頭在線跟蹤系統(tǒng)，其特征在于，包括：

行人檢測模塊，用于實(shí)時(shí)檢測攝像頭獲取到的視頻畫面中的行人，并實(shí)時(shí)返回行人檢測信息；其中，所述行人檢測信息包括檢測框、行人Id和行人特征值；

行人檢測模塊，包括檢測框輸出單元；

所述檢測框輸出單元，用于對圖像中行人進(jìn)行檢測，并返回框取的行人的人體框和人頭框；

人體識別模塊，用于對所述行人檢測信息進(jìn)行人體特征提取，并將所述人體特征提取的結(jié)果與目標(biāo)庫中的信息進(jìn)行特征比對，返回比中的目標(biāo)人體識別結(jié)果；

人臉識別模塊，用于對所述行人檢測信息進(jìn)行人臉檢測，并將所述人臉檢測的結(jié)果與人臉目標(biāo)庫中的信息進(jìn)行搜索比對，返回比中的目標(biāo)人臉識別結(jié)果；

目標(biāo)篩選模塊，用于根據(jù)所述行人檢測信息將所述目標(biāo)人體識別結(jié)果與所述目標(biāo)人臉識別結(jié)果進(jìn)行數(shù)據(jù)融合，同時(shí)，對比中的目標(biāo)進(jìn)行速度計(jì)算并篩選，返回目標(biāo)篩選結(jié)果；

多攝像頭目標(biāo)融合模塊，用于根據(jù)多個(gè)攝像頭獲取到的目標(biāo)位置信息，剔除不正確的目標(biāo)識別結(jié)果，輸出篩選得到的最終目標(biāo)追蹤信息；其中，所述最終目標(biāo)追蹤信息包括該目標(biāo)的行人信息和定位信息；

所述多攝像頭目標(biāo)融合模塊包括人體識別結(jié)果收集單元和離群點(diǎn)剔除單元；其中，

所述人體識別結(jié)果收集單元，用于收集同一時(shí)間戳不同攝像頭下的人體識別結(jié)果，并根據(jù)所述人體識別結(jié)果的行人Id篩選識別出相同目標(biāo)的不同攝像頭；

所述離群點(diǎn)剔除單元，用于分別計(jì)算不同攝像頭下的目標(biāo)位置點(diǎn)與其他攝像頭下的目標(biāo)位置點(diǎn)的平均距離，并將所述平均距離大于預(yù)設(shè)閾值的攝像頭的識別結(jié)果進(jìn)行剔除。

2.根據(jù)權(quán)利要求1所述的多行人跨攝像頭在線跟蹤系統(tǒng)，其特征在于，還包括跨攝像頭目標(biāo)特征搜集模塊，用于獲取目標(biāo)在不同攝像頭不同朝向的特征值，將該目標(biāo)的各種特征值進(jìn)行存儲并實(shí)時(shí)更新。

3.根據(jù)權(quán)利要求1所述的多行人跨攝像頭在線跟蹤系統(tǒng)，其特征在于，所述行人檢測模塊還包括圖像獲取單元和檢測信息發(fā)送單元；其中

所述圖像獲取單元，用于從網(wǎng)絡(luò)消息隊(duì)列中實(shí)時(shí)獲取攝像頭傳入的視頻截圖和圖像信息；

所述檢測信息發(fā)送單元，用于將所述行人檢測信息發(fā)送到網(wǎng)絡(luò)消息隊(duì)列中。

4.根據(jù)權(quán)利要求1所述的多行人跨攝像頭在線跟蹤系統(tǒng)，其特征在于，所述人體識別模塊包括神經(jīng)網(wǎng)絡(luò)模型構(gòu)建單元、人體特征提取單元、人體識別結(jié)果輸出單元；其中，

所述神經(jīng)網(wǎng)絡(luò)模型構(gòu)建單元，用于根據(jù)獲取的行人數(shù)據(jù)集，構(gòu)建行人人體識別網(wǎng)絡(luò)模型；其中，所述行人數(shù)據(jù)集包括不同姿態(tài)、不同角度、不同光照條件下的人體特征數(shù)據(jù)；

所述人體特征提取單元，用于根據(jù)所述行人檢測信息，利用所述人體識別網(wǎng)絡(luò)模型進(jìn)行行人特征提取，獲取行人特征向量；

所述人體識別結(jié)果輸出單元，用于將所述行人特征向量與目標(biāo)庫中的信息進(jìn)行特征向量比對，根據(jù)馬氏距離進(jìn)行行人特性向量距離篩選，返回篩選得到的目標(biāo)人體識別結(jié)果。

5.根據(jù)權(quán)利要求1所述的多行人跨攝像頭在線跟蹤系統(tǒng)，其特征在于，所述人臉識別模塊包括人臉圖像獲取單元、人臉比對單元、人臉識別結(jié)果輸出單元；其中，

所述人臉圖像獲取單元，用于獲取每個(gè)攝像頭逐幀畫面的行人檢測信息，根據(jù)所述行人檢測信息的人頭框進(jìn)行人臉圖像提取；

所述人臉比對單元，用于將提取的人臉圖像與人臉目標(biāo)庫中的人臉信息進(jìn)行搜索對比，根據(jù)預(yù)設(shè)的相似度閾值篩選出比中的目標(biāo)人臉識別結(jié)果；

所述人臉識別結(jié)果輸出單元，用于返回所述目標(biāo)人臉識別結(jié)果的行人信息和圖像信息。

6.根據(jù)權(quán)利要求1所述的多行人跨攝像頭在線跟蹤系統(tǒng)，其特征在于，所述目標(biāo)篩選模塊包括備選識別結(jié)果獲取單元、目標(biāo)融合單元、目標(biāo)篩選單元；其中，

所述備選識別結(jié)果獲取單元，用于接收同一時(shí)間戳的目標(biāo)人體識別結(jié)果和目標(biāo)人臉識別結(jié)果；

所述目標(biāo)融合單元，用于根據(jù)預(yù)設(shè)的數(shù)據(jù)融合策略對所述目標(biāo)人體識別結(jié)果和所述目標(biāo)人臉識別結(jié)果進(jìn)行目標(biāo)融合；

所述目標(biāo)篩選單元，用于根據(jù)目標(biāo)的移動(dòng)速度進(jìn)行非正常行人識別結(jié)果剔除，并返回經(jīng)過目標(biāo)融合和目標(biāo)剔除操作后的目標(biāo)篩選結(jié)果。

7.根據(jù)權(quán)利要求1所述的多行人跨攝像頭在線跟蹤系統(tǒng)，其特征在于，所述多攝像頭目標(biāo)融合模塊還包括融合結(jié)果輸出單元；其中，

所述融合結(jié)果輸出單元，用于輸出進(jìn)行識別結(jié)果剔除后的目標(biāo)篩選結(jié)果。