[發(fā)明專利]一種基于深度特征重構(gòu)的遮擋行人重識(shí)別方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201910765422.0
• 申請(qǐng)日: 2019-08-19
• 公開(kāi)（公告）號(hào): CN110472591B
• 公開(kāi)（公告）日: 2022-03-25
• 發(fā)明（設(shè)計(jì)）人: 高飛;金一鳴;盧書(shū)芳;張?jiān)Q;程振波;肖剛
• 申請(qǐng)（專利權(quán)）人: 浙江工業(yè)大學(xué)
• 主分類(lèi)號(hào): G06V40/10
• 分類(lèi)號(hào): G06V40/10;G06V10/75;G06V10/764;G06K9/62
• 代理公司: 杭州浙科專利事務(wù)所(普通合伙) 33213
• 代理人: 吳秉中

1.一種基于深度特征重構(gòu)的遮擋行人重識(shí)別方法，其特征在于，包括如下步驟：

步驟1.1：給定待匹配的帶遮擋行人的圖像，歸一化到固定大小，分別記為P_d和P_c；

步驟1.2：設(shè)計(jì)特征提取網(wǎng)絡(luò)FPSN，該網(wǎng)絡(luò)以Resnet作為網(wǎng)絡(luò)主干并去掉最后的平均池化層和softmax層；

步驟1.3：利用姿態(tài)估計(jì)算法給待匹配圖像P_d和P_c中的行人進(jìn)行姿態(tài)預(yù)測(cè)，得到行人骨架；

步驟2.1：根據(jù)骨架將圖像P_d中的行人劃分為頭部、左軀干、右軀干、上腿部、以及下腿部五個(gè)子圖部分，并將被遮擋而沒(méi)有劃分出的區(qū)域進(jìn)行涂黑，將這張圖像命名為P_db；

步驟2.2：根據(jù)骨架將圖像P_c中的行人劃分為頭部、左軀干、右軀干、上腿部以及下腿部五個(gè)子圖部分，并將被遮擋而沒(méi)有劃分出的區(qū)域進(jìn)行涂黑，將這張圖像命名為P_cb；

步驟3.1：將圖像P_db和P_cb行分別放入FPSN網(wǎng)絡(luò)中進(jìn)行特征提取，分別得到一張W×H×D的特征圖，記為P_df和P_cf，其中W代表寬度，H代表高度，D代表通道數(shù)；

步驟3.2：將特征圖P_df和P_cf分別分為W×H個(gè)小塊，其中每個(gè)小塊的大小為1×1×D，特征圖P_df劃分的M個(gè)小塊集合記為X，X＝{x_i|i＝1,2,…,M}，特征圖P_cf劃分的N個(gè)小塊集合記為Y，Y＝{y_j|j＝1,2,…,N}；

步驟3.3：用Y中的塊y_j對(duì)X中任意的小塊x_i進(jìn)行稀疏重構(gòu)，得到x_i相對(duì)于Y的稀疏系數(shù)為w_i；

步驟4.1：計(jì)算x_i與y_j的余弦相似度t_ij；

步驟4.2：計(jì)算x_i與Y之間的距離d_i：

d_i＝min{(||x_i-w_iy_k||₂-λt_ikw_i)|k＝1,2,…,N} (1)

其中，參數(shù)λ是提前設(shè)置的控制參數(shù)，min表示求集合中的最小值，||·||₂表示給定向量的2范數(shù)，y_k表示Y中的一個(gè)小塊，t_ik表示x_i與y_k的余弦相似度；

步驟4.3：根據(jù)式(2)計(jì)算圖像P_d和P_c之間相似度：

其中，M表示步驟3.2中特征圖P_df劃分的小塊數(shù)量；

步驟4.4：給定閾值T，若D(P_d,P_c)≥T，認(rèn)定圖像P_d和P_c為相似。