[發明專利]一種圖像中對象的檢索方法、裝置、設備和存儲介質

在審

• 申請號: 202110508436.1
• 申請日: 2021-05-10
• 公開（公告）號: CN113344027A
• 公開（公告）日: 2021-09-03
• 發明（設計）人: 莊月清
• 申請（專利權）人: 北京邁格威科技有限公司
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06F16/583
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 唐正瑜

本申請提供一種圖像中對象的檢索方法、裝置、設備和存儲介質，所述圖像中對象的檢索方法、裝置、設備和存儲介質，在確定兩個對象之間的目標相似度的時候，不僅依賴該兩個對象各自的特征向量來確定目標相似度，還依賴了兩個圖像中所有對象的特征向量來確定目標相似度，即目標對象的確定是依賴了上下文信息的。解決了現有技術存在的利用待檢索對象特征對待檢索對象進行檢索存在的難度大，無法檢出待檢索對象導致對象丟失的問題。

技術領域

本申請涉及圖像檢索領域，具體而言，涉及一種圖像中對象的檢索方法、裝置、設備和存儲介質。

背景技術

圖像檢索是在多個圖像中找到相似圖像，具體的，是要在多個圖像中找到相同的對象。例如，給到兩張圖像A和B，兩張圖像中均包括多個人，其中，圖像A中有人a、b、c，圖像檢索的目的就是從圖像B中找到人a、b或c。

現有的圖像檢索，往往是根據兩個人之間的特征來檢索的。例如，具體根據兩個人之間的人臉特征，但是，在很多圖像中，人往往是背對攝像頭的，對于這些圖像，圖像檢索的難度大大增加，甚至無法檢索出目標對象，導致目標丟失。

發明內容

本申請實施例的目的在于提供一種圖像中對象的檢索方法、裝置、設備和存儲介質，用以現有技術存在的利用待檢索對象特征對待檢索對象進行檢索存在的難度大，無法檢出待檢索對象導致對象丟失的問題。

第一方面，提供了一種圖像中對象的檢索方法，包括：

獲取參考圖像和目標圖像，所述參考圖像和所述目標圖像中均包含有多個對象；

根據所述參考圖像和所述目標圖像，得到所述參考圖像和所述目標圖像中多個對象的特征向量；

根據所述參考圖像中參考對象的特征向量和所述目標圖像中目標對象的特征向量，得到所述參考對象和所述目標對象之間的局部相似度，所述參考對象為所述參考圖像中多個對象中的待檢索對象，所述目標對象為所述目標圖像中多個對象中的一個；

根據所述參考圖像和所述目標圖像中上下文對象的特征向量，得到所述參考對象和所述目標對象之間的上下文相似度；其中，所述上下文對象包括至少一個除所述參考對象和所述目標對象以外的對象；

根據所述參考對象和所述目標對象之間的局部相似度和上下文相似度，得到所述參考對象和所述目標對象之間的目標相似度，以根據所述目標相似度返回檢索結果。

上述圖像中對象的檢索方法，在確定兩個對象之間的目標相似度的時候，不僅依賴該兩個對象各自的特征向量來確定目標相似度，還依賴了兩個圖像中所有對象的特征向量來確定目標相似度，即目標對象的確定是依賴了上下文信息的，從而提高檢索準確率，解決了現有技術存在的利用待檢索對象特征對待檢索對象進行檢索存在的難度大、無法檢出待檢索對象導致對象丟失的問題。例如，對象背對攝像頭的應用場景，由于無法提取到對象的面部特征，單純的依賴局部相似度大概率會導致檢索失敗，目標丟失，但是，由于目標相似度結合了上下文信息，也即通過目標相似度實現了根據上下文信息進行檢索，此時，即使無法獲取到面部特征，也能提高檢索準確率。

在一個實施例中，所述根據所述參考圖像中參考對象的特征向量和所述目標圖像中目標對象的特征向量，得到所述參考對象和所述目標對象之間的局部相似度，包括：根據所述參考對象和所述目標對象的特征向量，得到所述參考對象和所述目標對象之間的初步相似度；根據所述初步相似度，得到所述參考對象和所述目標對象之間的局部相似度。

上述實施例，通過向量距離來確定相似度，并且，局部相似度的確定不是單純的依賴參考對象和目標對象的特征向量，而是基于特征向量得到初步相似度，然后再對初步相似度進行調整得到局部相似度，以便通過調整增大局部相似度的精度。