[發明專利]圖像搜索、獲取圖像文本信息的方法及裝置

有效

• 申請號: 201310328673.5
• 申請日: 2013-07-31
• 公開（公告）號: CN104346370B
• 公開（公告）日: 2018-10-23
• 發明（設計）人: 劉瑞濤;張洪明;茹新峰
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 蘇培華

1.一種圖像搜索方法，其特征在于，包括：

接收到用戶輸入的查詢圖后，提取所述查詢圖的主體內容區域，并基于所述主體內容區域進行視覺特征提取；所述主體內容區域為所述查詢圖中與業務對象相關的內容所在的區域；

將所述查詢圖的視覺特征與圖像數據庫中各圖像的視覺特征進行相似度判別；所述圖像數據庫中保存有多個圖像對應的視覺特征信息以及對應數據對象所屬類目，所述多個圖像為業務對象的主圖；其中，如果所提取出的查詢圖的視覺特征為多種，則通過以下方式進行相似度判別：按照預先為各種特征設置的先后順序，進行級聯式的分層計算；其中，在每層的計算中，僅基于其中一種特征進行相似度判別，并將符合層內預置條件的圖像集合輸入到下一層，以便基于下一種特征進行相似度判別；

根據與所述查詢圖的相似度符合預置條件的圖像對應業務對象的類目信息和/或描述信息，確定所述查詢圖所屬的類目信息和/或描述信息；

根據所述查詢圖以及確定出的查詢圖所屬的類目信息和/或描述信息進行搜索，返回搜索結果。

2.根據權利要求1所述的方法，其特征在于，如果所述查詢圖的主體內容是服飾類內容，則所述提取所述查詢圖的主體內容區域，包括：

利用人臉檢測技術進對所述查詢圖進行人臉檢測，檢測出人臉區域的位置及面積；

根據所述人臉區域的位置、面積以及預置的人臉區域與軀干區域的比例關系，確定軀干區域的位置及面積；

根據所述軀干區域的位置及面積，提取所述查詢圖的主體內容區域。

3.根據權利要求1所述的方法，其特征在于，所述基于所述主體內容區域進行視覺特征提取包括：

對所述查詢圖進行全局特征和/或局部特征的提取。

4.根據權利要求3所述的方法，其特征在于，所述全局特征包括全局邊緣視覺特征和/或全局顏色分布特征，所述局部特征包括局部旋轉不變特征。

5.根據權利要求1至4任一項所述的方法，其特征在于，所述根據與所述查詢圖的相似度符合預置條件的圖像對應業務對象的類目信息，確定所述查詢圖所屬的類目信息，包括：

根據圖像數據庫中保存的各個圖像的類目信息，確定所述相似度符合預置條件的各個圖像分別對應的類目；

將出現次數最多的類目確定為所述查詢圖所屬的類目信息。

6.根據權利要求5所述的方法，其特征在于，所述根據與所述查詢圖的相似度符合預置條件的圖像對應業務對象的類目信息和/或描述信息，確定所述查詢圖所屬的描述信息，包括：

提取所述相似度符合預置條件的圖像中所述出現次數最多的類目對應的圖像的描述信息，通過分析該描述信息獲取所述查詢圖的描述信息。

7.一種獲取圖像文本信息的方法，其特征在于，包括：

獲取待確定類目信息的目標圖像，提取所述目標圖像的主體內容區域，并基于所述主體內容區域進行視覺特征提取；所述主體內容區域為所述目標圖像中與業務對象相關的內容所在的區域；

將所述目標圖像的視覺特征與圖像數據庫中各圖像的視覺特征進行相似度判別；所述圖像數據庫中保存有多個圖像對應的視覺特征信息以及對應數據對象所屬類目，所述多個圖像為業務對象的主圖；其中，如果所提取出的目標圖像的視覺特征為多種，則通過以下方式進行相似度判別：按照預先為各種特征設置的先后順序，進行級聯式的分層計算；其中，在每層的計算中，僅基于其中一種特征進行相似度判別，并將符合層內預置條件的圖像集合輸入到下一層，以便基于下一種特征進行相似度判別；

根據與所述目標圖像的相似度符合預置條件的圖像對應業務對象的類目信息和/或描述信息，獲取所述目標圖像所屬的類目信息和/或描述信息。

8.根據權利要求7所述的方法，其特征在于，所述根據與所述目標圖像的相似度符合預置條件的圖像對應業務對象的類目信息，確定所述目標圖像所屬的類目信息，包括：

根據圖像數據庫中保存的各個圖像的類目信息，確定所述相似度符合預置條件的各個圖像分別對應的類目；

將出現次數最多的類目確定為所述目標圖像所屬的類目信息。