[發明專利]基于透視圖像內容的檢索系統、檢索方法以及安全檢查設備

有效

• 申請號: 201310734306.5
• 申請日: 2013-12-27
• 公開（公告）號: CN104750697B
• 公開（公告）日: 2019-01-25
• 發明（設計）人: 李元景;趙自然;張健;李強;顧建平
• 申請（專利權）人: 同方威視技術股份有限公司;清華大學
• 主分類號: G06F16/50
• 分類號: G06F16/50;G06K9/46
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 江鵬飛;汪揚

1.一種基于透視圖像內容的檢索系統,所述檢索系統包括：

預分類模塊,用于對透視圖像進行預分類處理，將所述透視圖像劃分為紋理圖像和非紋理圖像兩類；

圖像內容特征提取模塊，用于對所述透視圖像內容進行特征提取；

圖像表征模塊，用于對所述透視圖像內容的特征描述向量進行整合，構建圖像表征向量；

檢索模塊，用于基于檢索模型從圖像表征數據庫中檢索到與所檢索的圖像表征向量相似度較高的若干幅圖像，從而構建初級候選結果；

多樣性過濾模塊，用于對所述初級候選結果進行過濾，挑選出可以覆蓋多個貨物種類的圖像子集，從而構成多樣性的檢索結果；

相關度反饋調節模塊，用于接受用戶對檢索結果的信息反饋，并進行檢索模型的更新；以及

交互模塊，用于顯示檢索結果并采集用戶對檢索結果的滿意程度的反饋。

2.根據權利要求1所述的基于透視圖像內容的檢索系統，其特征在于，所述圖像內容特征提取模塊

對于紋理圖像：建立圖像金字塔，然后逐層進行超像素劃分，最后以超像素為單元建立紋理描述向量；

對于非紋理圖像：建立圖像金字塔，逐層逐像素進行特征點檢測，對檢測到的特征點建立特征描述向量。

3.根據權利要求1所述的基于透視圖像內容的檢索系統，其特征在于，所述圖像表征模塊

對于紋理圖像：采用碼書策略，統計所有以超像素為單元建立起來的紋理描述向量，建立直方圖，并以直方圖作為圖像的表征向量；

對于非紋理圖像：聚合所有建立在特征點上的特征描述向量，從而構成一個特征向量集合，并以這個特征向量集合作為圖像的表征向量。

4.根據權利要求1所述的基于透視圖像內容的檢索系統，其特征在于，所述檢索模塊

對于紋理圖像：圖像表征采用一個特征向量表示；

對于非紋理圖像：圖像表征采用一個特征向量集合表示。

5.根據權利要求1所述的基于透視圖像內容的檢索系統，其特征在于，所述交互模塊采用兩級樹形顯示方案：通過鼠標在掃描圖像上選取檢索區域；當檢索區域選取完成后，實時在其周圍顯示兩級樹形檢索結果；第一級，顯示多樣性過濾模塊的輸出結果；第二級，顯示與上一級同種貨物類型的其它相似圖像；當鼠標滑過每一級節點時，會呈現出用戶對此檢索結果的滿意程度選擇標簽；在獲得反饋信息后，將所述反饋信息傳遞給所述相關度反饋調節模塊。

6.一種基于透視圖像內容的檢索方法,所述檢索方法包括：

預分類步驟,用于對透視圖像進行預分類處理，將所述透視圖像劃分為紋理圖像和非紋理圖像兩類；

圖像內容特征提取步驟，用于對所述透視圖像內容進行特征提取；

圖像表征步驟，用于對所述透視圖像內容的特征描述向量進行整合，構建圖像表征向量；

檢索步驟，用于基于檢索模型從圖像表征數據庫中檢索到與所檢索的圖像表征向量相似度較高的若干幅圖像，從而構建初級候選結果；

多樣性過濾步驟，用于對所述初級候選結果進行過濾，挑選出可以覆蓋多個貨物種類的圖像子集，從而構成多樣性的檢索結果；

相關度反饋調節步驟，用于接受用戶對檢索結果的信息反饋，并進行檢索模型的更新；以及

交互步驟，用于顯示檢索結果并采集用戶對檢索結果的滿意程度的反饋。

7.根據權利要求6所述的基于透視圖像內容的檢索方法，其特征在于，在所述圖像內容特征提取步驟中

對于紋理圖像：建立圖像金字塔，然后逐層進行超像素劃分，最后以超像素為單元建立紋理描述向量；

對于非紋理圖像：建立圖像金字塔，逐層逐像素進行特征點檢測，對檢測到的特征點建立特征描述向量。

8.根據權利要求6所述的基于透視圖像內容的檢索方法，其特征在于，在所述圖像表征步驟中

對于紋理圖像：采用碼書策略，統計所有以超像素為單元建立起來的紋理描述向量，建立直方圖，并以直方圖作為圖像的表征向量；

對于非紋理圖像：聚合所有建立在特征點上的特征描述向量，從而構成一個特征向量集合，并以這個特征向量集合作為圖像的表征向量。