[發明專利]圖像相似度檢測方法、裝置、存儲介質與電子設備

有效

• 申請號: 202010431756.7
• 申請日: 2020-05-20
• 公開（公告）號: CN111694978B
• 公開（公告）日: 2023-04-28
• 發明（設計）人: 葉菲菲
• 申請（專利權）人: OPPO（重慶）智能科技有限公司
• 主分類號: G06F16/583
• 分類號: G06F16/583;G06V10/74
• 代理公司: 深圳市聯鼎知識產權代理有限公司 44232
• 代理人: 劉抗美

1.一種圖像相似度檢測方法，其特征在于，包括：

提取第一圖像中的文本內容，得到第一文本信息，以及提取第二圖像中的文本內容，得到第二文本信息；

檢測所述第一圖像與所述第二圖像之間的第一相似度；

檢測所述第一文本信息與所述第二文本信息之間的第二相似度；

基于所述第一相似度和所述第二相似度，確定所述第一圖像與所述第二圖像是否相似；

其中，所述第一文本信息包括：從所述第一圖像中所提取的至少一段第一圖像文本，以及每段所述第一圖像文本在所述第一圖像中的位置；所述第二文本信息包括：從所述第二圖像中所提取的至少一段第二圖像文本，以及每段所述第二圖像文本在所述第二圖像中的位置；

所述檢測所述第一文本信息與所述第二文本信息之間的第二相似度，包括：

根據每段所述第一圖像文本在所述第一圖像中的位置和每段所述第二圖像文本在所述第二圖像中的位置，將位置相同或相近的一段所述第一圖像文本和一段所述第二圖像文本生成一組圖像文本對；

基于每組所述圖像文本對中所述第一圖像文本與所述第二圖像文本之間的文本相似度與位置相似度，確定每組所述圖像文本對的相似度；所述第一圖像文本與所述第二圖像文本之間的位置相似度為：1/(1+位置距離)；其中，位置距離為所述第一圖像文本與所述第二圖像文本之間的位置距離；

綜合各組所述圖像文本對的相似度，確定所述第一文本信息與所述第二文本信息之間的第二相似度。

2.根據權利要求1所述的方法，其特征在于，所述提取第一圖像中的文本內容，得到第一文本信息，以及提取第二圖像中的文本內容，得到第二文本信息，包括：

對所述第一圖像進行光學字符識別處理，并將所識別出的字符轉換為對應的第一文本信息；

對所述第二圖像進行光學字符識別處理，并將所識別出的字符轉換為對應的第二文本信息。

3.根據權利要求1所述的方法，其特征在于，所述檢測所述第一文本信息與所述第二文本信息之間的第二相似度，還包括：

若所述第一圖像文本與所述第二圖像文本的數量不同，則將未組成圖像文本對的所述第一圖像文本或所述第二圖像文本與空值組成單獨成對的圖像文本對，并確定所述單獨成對的圖像文本對的相似度為0。

4.根據權利要求1所述的方法，其特征在于，所述綜合各組所述圖像文本對的相似度，確定所述第一文本信息與所述第二文本信息之間的第二相似度，包括：

根據每組所述圖像文本對的字符數與全部所述圖像文本對的總字符數的比值，計算每組所述圖像文本對的權重；或者，根據每組所述圖像文本對的面積與全部所述圖像文本對的總面積的比值，計算每組所述圖像文本對的權重；

采用每組所述圖像文本對的權重對各組所述圖像文本對的相似度加權，得到所述第一文本信息與所述第二文本信息之間的第二相似度。

5.根據權利要求1所述的方法，其特征在于，所述檢測所述第一圖像與所述第二圖像之間的第一相似度，包括：

利用預設的圖像特征提取模型對所述第一圖像提取特征，得到第一特征，以及對所述第二圖像提取特征，得到第二特征；

確定所述第一特征與所述第二特征之間的第一相似度。

6.根據權利要求5所述的方法，其特征在于，所述圖像特征提取模型，通過以下方式獲取：

訓練一圖像分類模型；

截取所述圖像分類模型中從輸入層到全連接層的部分，得到所述圖像特征提取模型。

7.根據權利要求1至6任一項所述的方法，其特征在于，所述基于所述第一相似度和所述第二相似度，確定所述第一圖像與所述第二圖像是否相似，包括：

將所述第一相似度和所述第二相似度進行加權計算，得到所述第一圖像與所述第二圖像之間的綜合相似度；

根據所述綜合相似度確定所述第一圖像與所述第二圖像是否相似。