[發明專利]圖像搜索方法和裝置、電子設備、存儲介質、程序

在審

• 申請號: 201711402436.3
• 申請日: 2017-12-21
• 公開（公告）號: CN108228757A
• 公開（公告）日: 2018-06-29
• 發明（設計）人: 張韻璇;李誠
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京思源智匯知識產權代理有限公司 11657
• 代理人: 毛麗琴

1.一種圖像搜索方法，其特征在于，包括：

對接收的待處理數據進行處理，獲得對應的數據特征；所述待處理數據包括：待處理圖像和/或待處理文字；

利用表征網絡，對所述數據特征執行映射操作，得到對應所述數據特征的映射特征；所述映射特征用于同時表征圖像和文字的特征信息，并通過映射特征之間的距離表征數據之間的相似度；

基于所述映射特征從待查圖像集中獲得對應的圖像作為目標圖像，所述待查圖像集中包括至少一個圖像。

2.根據權利要求1所述的方法，其特征在于，所述對接收的待處理數據進行處理，獲得對應的數據特征，包括：

利用卷積神經網絡，對待處理圖像進行處理，得到對應所述待處理圖像的圖像特征；

和/或，利用自然語言處理網絡，對待處理文字進行處理，得到對應所述待處理文字的文字特征。

3.根據權利要求2所述的方法，其特征在于，所述利用自然語言處理網絡，對待處理文字進行處理，得到對應所述待處理文字的文字特征，包括：

將待處理文字輸入自然語言處理網絡，通過所述自然語言處理網絡中的輸入層將樣本文字分解并轉化為獨熱碼；

所述獨熱碼通過隱層和輸出層得到對應所述樣本文字的預測文字特征向量。

4.根據權利要求3所述的方法，其特征在于，所述利用自然語言處理網絡，對待處理文字進行處理，得到對應所述待處理文字的文字特征之前，還包括：

基于自然語言處理網絡獲取樣本文字的預測文字特征向量，基于所述樣本文字的預測文字特征向量對所述自然語言處理網絡進行訓練。

5.根據權利要求4所述的方法，其特征在于，所述基于所述樣本文字的預測文字特征向量對所述自然語言處理網絡進行訓練，包括：

基于所述樣本文字的預測文字特征向量、輸入隱層的獨熱碼和隱層參數計算對數后驗概率，通過調整隱層參數使對數后驗概率最大化；

將對應所述最大化對數后延概率的隱層參數帶入所述自然語言處理網絡，得到訓練后的自然語言處理網絡。

6.一種圖像搜索裝置，其特征在于，包括：

處理單元，用于對接收的待處理數據進行處理，獲得對應的數據特征；所述待處理數據包括待處理圖像和/或待處理文字；

映射單元，用于利用表征網絡，對所述數據特征執行映射操作，得到對應所述數據特征的映射特征；所述映射特征用于同時表征圖像和文字的特征信息，并通過映射特征之間的距離表征數據之間的相似度；

搜索單元，用于基于所述映射特征從待查圖像集中獲得對應的圖像作為目標圖像，所述待查圖像集中包括至少一個圖像。

7.一種電子設備，其特征在于，包括處理器，所述處理器包括權利要求6所述的圖像搜索裝置。

8.一種電子設備，其特征在于，包括：存儲器，用于存儲可執行指令；

以及處理器，用于與所述存儲器通信以執行所述可執行指令從而完成權利要求1至5任意一項所述圖像搜索方法的操作。

9.一種計算機存儲介質，用于存儲計算機可讀取的指令，其特征在于，所述指令被執行時執行權利要求1至5任意一項所述圖像搜索方法的操作。

10.一種計算機程序，包括計算機可讀代碼，其特征在于，當所述計算機可讀代碼在設備上運行時，所述設備中的處理器執行用于實現權利要求1至5任意一項所述圖像搜索方法中各步驟的指令。