[發(fā)明專利]一種目標(biāo)人物識別方法、裝置、電子設(shè)備及存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202011080198.0
• 申請日: 2020-10-10
• 公開（公告）號: CN112215136B
• 公開（公告）日: 2023-09-05
• 發(fā)明（設(shè)計）人: 鄭義
• 申請（專利權(quán)）人: 北京奇藝世紀科技有限公司
• 主分類號: G06V40/10
• 分類號: G06V40/10;G06V10/75;G06V10/774
• 代理公司: 北京柏杉松知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11413
• 代理人: 項京;丁蕓

1.一種目標(biāo)人物識別方法，其特征在于，包括：

獲得包含待識別人物的待識別圖像；

通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從所述待識別圖像中，提取待識別人物的待識別人物特征；

將所述待識別人物特征與多個預(yù)設(shè)人物特征進行特征匹配，得到匹配結(jié)果；其中，每一預(yù)設(shè)人物特征對應(yīng)一個人物身份信息；所述多個預(yù)設(shè)人物特征為：預(yù)先通過所述預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從多個目標(biāo)人物圖像中提取的各個目標(biāo)人物的人物特征；

若匹配結(jié)果為：存在與所述待識別人物特征相匹配的匹配人物特征，則輸出所述匹配人物特征對應(yīng)的身份信息，作為所述待識別人物的識別結(jié)果；

若匹配結(jié)果為：不存在與所述待識別人物特征相匹配的匹配人物特征，則將所述待識別人物特征輸入預(yù)設(shè)的人物識別模型，得到人物識別模型輸出的待識別人物的身份信息，作為所述待識別人物的識別結(jié)果；所述人物識別模型是預(yù)先基于樣本目標(biāo)人物的標(biāo)記的身份信息和預(yù)設(shè)特征提取網(wǎng)絡(luò)模型提取的樣本目標(biāo)人物特征進行訓(xùn)練獲得的；

所述通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從所述待識別圖像中，提取待識別人物的待識別人物特征的步驟，包括：

通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從所述待識別圖像中，提取待識別人物的多模態(tài)特征，作為待識別人物特征；所述多模態(tài)特征，用于表征人物的多個預(yù)設(shè)部位及全局的特征，其中，所述預(yù)設(shè)部位為所述待識別人物的局部，所述全局的特征包括局部特征；

所述樣本目標(biāo)人物特征的獲取步驟，包括：

預(yù)先針對每個樣本目標(biāo)人物，獲得包含該樣本目標(biāo)人物的所述多個預(yù)設(shè)部位及完整人體的多個圖像，作為樣本目標(biāo)人物圖像；并，

通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從所述樣本目標(biāo)人物圖像中，提取樣本目標(biāo)人物的多模態(tài)特征，作為樣本目標(biāo)人物特征。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從所述待識別圖像中，提取待識別人物的多模態(tài)特征，作為待識別人物特征的步驟，包括：

通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從所述待識別圖像中，提取待識別人物的多個預(yù)設(shè)部位的特征向量及全局的特征向量；

根據(jù)各預(yù)設(shè)部位的特征向量對應(yīng)的預(yù)設(shè)部位的預(yù)設(shè)權(quán)重和全局的特征向量對應(yīng)的全局的預(yù)設(shè)權(quán)重，對各個預(yù)設(shè)部位的特征向量及全局的特征向量進行組合，得到所述待識別人物的多模態(tài)特征，并將所述待識別人物的多模態(tài)特征作為待識別人物特征；

所述通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型從所述目標(biāo)人物圖像中，提取目標(biāo)人物的多模態(tài)特征，作為目標(biāo)人物特征的步驟，包括：

通過預(yù)設(shè)特征提取網(wǎng)絡(luò)模型提取所述目標(biāo)人物圖像中各圖像的特征向量，得到多個目標(biāo)特征向量；

根據(jù)各預(yù)設(shè)部位及全局的預(yù)設(shè)權(quán)重對所述多個目標(biāo)特征向量進行組合，得到所述目標(biāo)人物的多模態(tài)特征，并將所述目標(biāo)人物的多模態(tài)特征作為目標(biāo)人物特征。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述待識別人物特征與多個預(yù)設(shè)人物特征進行特征匹配，得到匹配結(jié)果的步驟，包括：

把提取的特征送入到開源的相似性搜索類庫Faiss中進行特征匹配，輸出匹配人物身份信息和匹配置信度；所述Faiss中存儲有多個預(yù)設(shè)人物特征；

若所述匹配置信度大于第一預(yù)設(shè)閾值，則將所述匹配人物身份信息作為與所述待識別人物特征相匹配的匹配人物特征；

若所述匹配置信度不大于第一預(yù)設(shè)閾值，則匹配結(jié)果為不存在與所述待識別人物特征相匹配的匹配人物特征。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，將所述目標(biāo)人物特征輸入預(yù)設(shè)的人物識別模型，得到人物識別模型輸入的待識別人物的身份信息，作為所述待識別人物的識別結(jié)果的步驟，包括：

將所述目標(biāo)人物特征輸入預(yù)設(shè)的人物識別模型，通過所述預(yù)設(shè)的人物識別模型對所述目標(biāo)人物特征進行識別，得到對應(yīng)的第一人物身份信息和所述第一人物身份信息對應(yīng)的第一置信度；

當(dāng)所述第一置信度大于第二預(yù)設(shè)閾值時，將所述第一人物身份信息作為所述待識別人物的識別結(jié)果。