[發明專利]一種基于文檔的海量實時特征處理方法及系統

在審

• 申請號: 202211429025.4
• 申請日: 2022-11-15
• 公開（公告）號: CN115878611A
• 公開（公告）日: 2023-03-31
• 發明（設計）人: 楊玉春;姚建明;曹克丹;張孜之
• 申請（專利權）人: 每日互動股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/23;G06F16/2455;G06F16/28;G06V10/62;G06V20/40
• 代理公司: 北京鍾維聯合知識產權代理有限公司 11579
• 代理人: 原春香

本申請涉及電數字數據處理技術領域，特別是涉及一種基于文檔的海量實時特征處理方法及系統，所述方法包括以下步驟：根據目標時間段內獲取的K個視頻，得到doc＝(doc₁，doc₂，…，doc_K)；遍歷doc，如果doc_i,meta,1為用戶搜索的攝像頭唯一標識，且doc_i,meta,2與用戶搜索的時間范圍存在交集，則獲取doc_i,data,2,j在用戶搜索的時間范圍內的doc_i,data,3,j；獲取Sim_j,0最大的前N個doc_i,data,1,j；將Sim_j,0最大的前N個doc_i,data,1,j進行聚合，得到用戶搜索的ReID特征的ID。本發明實現了對海量實時特征的快速搜索。

技術領域

本發明涉及電數字數據處理技術領域，特別是涉及一種基于文檔的海量實時特征處理方法及系統。

背景技術

行人重識別(Person Re-identification，簡稱ReID)是利用計算機視覺技術判斷圖像中是否存在特定行人的技術。基于圖像的ReID特征可從海量圖像中查詢到存在特定行人的圖像。傳統的海量實時特征搜索系統一般都是用鍵值(Key-Value)數據庫存儲ReID特征，用關系型數據庫存儲ReID特征元數據；搜索的時候先根據搜索條件從關系型數據庫中篩選出所有符合條件的ReID特征的Key，然后從Key-Value數據庫中讀取Key對應的ReID特征Value，建立臨時搜索索引，搜索返回結果。然而，Key-Value數據庫的每秒查詢率(QPS)的上限太低，即使是Redis這樣的內存Key-Value數據庫，單機QPS也不到10萬，所以從Key-Value數據庫讀取特征速度比較慢，影響了特征處理的速度。如何實現海量實時特征的快速搜索，是亟待解決的技術問題。

發明內容

本發明目的在于，提供一種基于文檔的海量實時特征處理方法及系統，以實現海量實時特征的快速搜索。

根據本發明的第一方面，提供了一種基于文檔的海量實時特征處理方法，包括以下步驟：