[發明專利]一種基于圖文語義轉移技術的照片檢索方法

在審

• 申請號: 202110733293.4
• 申請日: 2021-06-30
• 公開（公告）號: CN113360698A
• 公開（公告）日: 2021-09-07
• 發明（設計）人: 張楠坤
• 申請（專利權）人: 北京海納數聚科技有限公司
• 主分類號: G06F16/583
• 分類號: G06F16/583;G06F16/55;G06K19/06
• 代理公司: 北京智沃律師事務所 11620
• 代理人: 吳志宏

1.一種基于圖文語義轉移技術的照片檢索方法，包括以下步驟：

S1：掃描存放有圖片的文件夾，對文件夾進行排序并編號；掃描文件夾中的圖片，對圖片進行排序并編號；

S2：對每張圖片進行識別分析，并建立該圖片的標簽；

S3：根據標簽內容，實現圖片聚類操作；

S4：對檢索內容提取關鍵字，通過關鍵字在聚類集合、標簽中進行檢索，并將得到的檢索結果顯示。

2.根據權利要求1所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：步驟S2中，圖片生成標簽的過程如下所述：

S21：圖片顏色的標簽生成，識別模塊分析圖片的顏色，生成顏色標簽；

S22：圖片人臉識別的標簽生成，識別模塊分析圖片的人臉數量，生成人數標簽；

S23：圖片建筑物識別的標簽生成，識別模塊分析圖片的建筑物，生成建筑物標簽；

S24：圖片車輛識別的標簽生成，識別模塊分析圖片的車輛，生成車輛標簽；

S25：圖片動物識別的標簽生成，識別模塊分析圖片的動物種類以及數量，生成動物標簽；

S26：圖片植物識別的標簽生成，識別模塊分析圖片的植物種類以及數量，生成植物標簽；

S27：圖片文字識別的標簽生成，識別模塊分析圖片的文字，生成文字標簽；

S28：圖片二維碼識別的標簽生成，識別模塊分析圖片的二維碼，生成二維碼標簽。

3.根據權利要求1所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：步驟S3中，聚類操作包括以下步驟：

S31：圖片日期聚類，將拍攝圖片時間在同一天的圖片進行聚類，集合名稱設置為日期；

S22：圖片標簽聚類，將標簽重合數到達設定值的圖片進行聚類，集合名稱設置為標簽組合；

S23：圖片近似度聚類，將相近似的圖片形成一個集合，集合名稱設置為重要標簽和數字的組合，所述重要標簽是指這些圖片中標簽出現頻率最多的標簽。

4.根據權利要求3所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：步驟S23中，近似度聚類的操作如下：

S231,在圖片庫中選取一張圖片P，以這張圖片P為輸入在圖片庫中進行檢索，尋找相似度距離最小的圖片Q1；

S232,以圖片Q1為檢索輸入并將圖片集劃分為和Q1的相似度距離小于距離闕值A1的部分SH1，并得到相似度距離最小的圖片Q2；

S233,循環執行步驟S232，每次的檢索圖片為上一次循環得到的最相似圖片QN，被檢索的圖片集為上一次循環得到的SHN，直到SHN為空為止，所得到的Q1……QNN張圖片即為近似度選出的N個聚類圖片。

5.根據權利要求1所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：步驟S2中，所述標簽能夠帶有備注，所述備注內容是標簽信息的詳細文字描述。

6.根據權利要求1所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：步驟S4中，檢索過程如下所述：

S41：分析關鍵字所述標簽類型；通過標簽在聚類集合中的名稱中進行檢索，將最接近的集合進行圖片提取；

S42：在檢索到沒有最接近的集合時，反饋用戶檢索是否擴大范圍，用戶同意時，則在數據庫模塊對標簽進行檢索；得到檢索結果后，將圖片提取并顯示。

7.根據權利要求5所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：在檢索反饋的圖片不符合用戶要求時，詢問是否發起近似檢索，在用戶點擊同意后，通過檢索內容中的關鍵字，以及關鍵字的等效替換，通過關鍵字在標簽和備注中進行檢索，得到檢索結果后，將圖片提取并顯示。

8.根據權利要求6或7任一所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：提取相關圖片后，當用戶瀏覽該圖片時，能夠點擊圖片顯示該圖片所述聚類集合，點擊對應的聚類集合，能夠將該圖片同一聚類集合的圖片也同時顯示出來。

9.根據權利要求1所述的基于圖文語義轉移技術的照片檢索方法，其特征在于：步驟S2中，所述標簽的類型數量不超過10個。