[發(fā)明專利]基于監(jiān)控視頻進(jìn)行圖像檢索的方法、裝置、設(shè)備及介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010324076.5
• 申請(qǐng)日: 2020-04-22
• 公開（公告）號(hào): CN111538861B
• 公開（公告）日: 2023-08-15
• 發(fā)明（設(shè)計(jì)）人: 張朋
• 申請(qǐng)（專利權(quán)）人: 浙江大華技術(shù)股份有限公司
• 主分類號(hào): G06F16/783
• 分類號(hào): G06F16/783;G06F16/732;G06V10/74
• 代理公司: 北京同達(dá)信恒知識(shí)產(chǎn)權(quán)代理有限公司 11291
• 代理人: 趙凱莉

1.一種基于監(jiān)控視頻進(jìn)行圖像檢索的方法，其特征在于，所述方法包括：

獲取接收到的待檢索行人的第一部位的圖像的第一子結(jié)構(gòu)化信息，其中所述第一部位為人臉或者身體；

根據(jù)保存的每個(gè)圖像的所述第一部位的子結(jié)構(gòu)化信息，查找所述第一部位的子結(jié)構(gòu)化信息與所述第一子結(jié)構(gòu)化信息的相似度滿足第一要求的每個(gè)第一目標(biāo)圖像；

根據(jù)所述每個(gè)第一目標(biāo)圖像，確定候選第一目標(biāo)圖像；

根據(jù)所述每個(gè)候選第一目標(biāo)圖像的第二部位的第二子結(jié)構(gòu)化信息及保存的每個(gè)圖像的第二部位的子結(jié)構(gòu)化信息，查找所述第二部位的子結(jié)構(gòu)化信息與所述第二子結(jié)構(gòu)化信息的相似度滿足第二要求的每個(gè)第二目標(biāo)圖像，其中所述第二部位為身體或人臉；

將所述每個(gè)第一目標(biāo)圖像和所述每個(gè)第二目標(biāo)圖像作為檢索到的圖像；

其中，子結(jié)構(gòu)化信息包括屬性信息和/或高維特征；

若所述子結(jié)構(gòu)化信息包括屬性信息和高維特征，所述根據(jù)該圖像中人臉區(qū)域的位置信息及對(duì)應(yīng)的預(yù)設(shè)算法，生成該圖像的身體的子結(jié)構(gòu)化信息包括：

根據(jù)該圖像中人臉區(qū)域的第三外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)，及預(yù)設(shè)的第二算法，得到該圖像中人體區(qū)域的第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)；

基于預(yù)先訓(xùn)練完成的特征提取模型，獲取包含人體區(qū)域的圖像的人體的高維特征；并基于預(yù)先訓(xùn)練完成的分類模型，獲取包含人體區(qū)域的圖像的人體的屬性信息；

獲取所述人體的高維特征中的身體的高維特征及人體的屬性信息中的身體的屬性信息構(gòu)建身體的子結(jié)構(gòu)化信息；

所述根據(jù)該圖像中人臉區(qū)域的第三外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)，及預(yù)設(shè)的第二算法，得到該圖像中人體區(qū)域的第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)包括：

根據(jù)以下公式

(x_p1,y_p1,x_p2,y_p2)＝(0.5×(5x_f1-3x_f2),2y_f1-y_f2,0.5×(5x_f2-3x_f1),6y_f2-5y_f1)，確定圖像中人體區(qū)域的第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)，其中，f1和f2為第三外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)，p1和p2為第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取接收到的待檢索行人的第一部位的圖像的第一子結(jié)構(gòu)化信息之前，所述方法還包括：

針對(duì)保存的每個(gè)圖像，判斷該圖像是否包含身體；

若否，根據(jù)該圖像中頭肩區(qū)域的位置信息或人臉區(qū)域的位置信息及對(duì)應(yīng)的預(yù)設(shè)算法，生成該圖像的身體的子結(jié)構(gòu)化信息，并針對(duì)該圖像保存生成的該身體的子結(jié)構(gòu)化信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，若所述子結(jié)構(gòu)化信息包括屬性信息和高維特征，所述根據(jù)該圖像中頭肩區(qū)域的位置信息及對(duì)應(yīng)的預(yù)設(shè)算法，生成該圖像的身體的子結(jié)構(gòu)化信息包括：

根據(jù)該圖像中頭肩區(qū)域的第一外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)，及預(yù)設(shè)的第一算法，得到該圖像中人體區(qū)域的第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)；

基于預(yù)先訓(xùn)練完成的特征提取模型，獲取包含人體區(qū)域的圖像的人體的高維特征；并基于預(yù)先訓(xùn)練完成的分類模型，獲取包含人體區(qū)域的圖像的人體的屬性信息；

獲取所述人體的高維特征中的身體的高維特征及人體的屬性信息中的身體的屬性信息構(gòu)建身體的子結(jié)構(gòu)化信息。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)該圖像中頭肩區(qū)域的第一外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)，及預(yù)設(shè)的第一算法，得到該圖像中人體區(qū)域的第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)包括：

根據(jù)以下公式確定圖像中人體區(qū)域的第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)的坐標(biāo)，其中，h1和h2為第一外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)，p1和p2為第二外接矩形坐標(biāo)框中對(duì)角線上兩個(gè)頂點(diǎn)，為人體與肩膀高度的統(tǒng)計(jì)系數(shù)。