[發明專利]一種在婚戀軟件上將圖像搜索應用于反詐的方法及裝置

在審

• 申請號: 202111429023.0
• 申請日: 2021-11-29
• 公開（公告）號: CN114090805A
• 公開（公告）日: 2022-02-25
• 發明（設計）人: 閆新宇;陳天博
• 申請（專利權）人: 上海花千樹信息科技有限公司
• 主分類號: G06F16/51
• 分類號: G06F16/51;G06F16/53;G06F16/55;G06V40/16;G06V10/82;G06V10/762;G06K9/62;G06F21/32;G06Q50/26;G06N3/04;G06N3/08
• 代理公司: 北京盛凡佳華專利代理事務所(普通合伙) 11947
• 代理人: 馬紅蕾

1.一種在婚戀軟件上將圖像搜索應用于反詐的方法，其特征在于，包括以下操作步驟：

S1、利用深度學習技術，訓練相似照片和相似人臉特征提取的模型；

S2、利用訓練好的模型，提取所有用戶上傳照片中的相似人臉和相似照片特征，并將用戶信息和對應的圖像特征存儲到檢索高效的redis數據庫；

S3、借助Web服務技術，提供相似圖像和相似人臉的搜索服務，其中該服務可實現搜索與上傳照片相似的照片信息與用戶信息，根據搜索到的相似照片數量和用戶類別信息進行判斷，如果相似照片數量過多并且用戶類別為黑名單用戶，則認為該用戶為疑似詐騙用戶。

2.根據權利要求1所述的在婚戀軟件上將圖像搜索應用于反詐的方法，其特征在于，所述S1中相似照片模型訓練為原始圖像和噪聲圖像聯合訓練編碼的方法，目的是使原始圖像和噪聲圖像趨于相同的編碼，相似人臉模型使得相同人臉在不同場景、不同表情下編碼趨于一致。

3.根據權利要求1所述的在婚戀軟件上將圖像搜索應用于反詐的方法，其特征在于，所述S3中，相似照片數量和用戶類別信息的判斷過程具體為：搜索到相似圖像，且對應相似用戶中有活躍用戶和加黑用戶時，判斷為疑似詐騙用戶，若沒搜索到相似圖像，或者搜索到相似圖像但是相似圖像中無加黑用戶或無活躍用戶時，則判斷為正常用戶。

4.一種在婚戀軟件上將圖像搜索應用于反詐的裝置，其特征在于，包括如權利要求1-3任意一項所述的在婚戀軟件上將圖像搜索應用于反詐的方法，所述裝置包括用于提供相似圖像和相似人臉的搜索服務的圖像檢索web服務端、相似圖片信息數據庫和相似人臉信息數據庫，所述的圖像檢索web服務端包括圖像人臉檢測模塊、人臉特征提取模塊、人臉特征編碼模塊、人臉特征搜索模塊、相似圖片特征提取模塊、相似圖片特征搜索模塊和用戶信息獲取模塊。

5.根據權利要求4所述的在婚戀軟件上將圖像搜索應用于反詐的裝置，其特征在于，所述圖像人臉檢測模塊用于檢測用戶上傳圖片中的是否存在人臉特征，所述人臉特征提取模塊用于對上傳圖片中的人臉特征進行信息提取，所述人臉特征編碼模塊用于對提取后的人臉特征進行編碼量化，所述人臉特征搜索模塊用于根據提取的人臉特征在所述相似圖片信息數據庫內部進行搜索匹配。

6.根據權利要求4所述的在婚戀軟件上將圖像搜索應用于反詐的裝置，其特征在于，所述相似圖片特征提取模塊用于對兩張相似照片進行相似特征提取，所述相似圖片特征搜索模塊用于根據提取的相似特征在圖片數據庫中繼續搜索是否存在相似照片，所述用戶信息獲取模塊通過與婚戀軟件信息庫連接，用于獲取內部的用戶信息數據。

7.根據權利要求4所述的在婚戀軟件上將圖像搜索應用于反詐的裝置，其特征在于，所述圖像檢索web服務端分別與所述所述相似圖片信息數據庫和所述相似人臉信息數據庫信號連接，所述相似圖片信息數據庫和所述相似人臉信息數據庫分別用于保存用于上傳的相似圖片以及從圖片中識別出來的相似人臉信息。

8.根據權利要求4所述的在婚戀軟件上將圖像搜索應用于反詐的裝置，其特征在于，所述的相似圖片信息數據庫包括圖像的特征編碼單元、用戶id存儲單元、照片id存儲單元，其中，存儲在redis的格式為hset，key為特征編碼，value為用戶id和照片id。

9.根據權利要求4所述的在婚戀軟件上將圖像搜索應用于反詐的裝置，其特征在于，所述相似人臉信息數據庫包括人臉特征embeding存儲單元、特征編碼單元、用戶id存儲單元、照片id存儲單元，其中，所述特征編碼單元編碼是經過乘積量化后的編碼，在存儲的結構中，key為量化后的編碼，value為人臉embeding和uid、pid。