[發明專利]一種基于嵌入式設備有限緩存的人臉檢測去重方法

有效

• 申請號: 201810283735.8
• 申請日: 2018-04-02
• 公開（公告）號: CN108491822B
• 公開（公告）日: 2020-09-08
• 發明（設計）人: 徐龍飛;何良斌;秦慶;石兆斌;李光;肖剛
• 申請（專利權）人: 杭州高創電子科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06F16/583
• 代理公司: 杭州浙科專利事務所(普通合伙) 33213
• 代理人: 杜立

1.一種基于嵌入式設備有限緩存的人臉檢測去重方法，其特征在于：初始時根據設備內存情況合理的建立人臉信息記錄隊列及原始視頻幀緩存隊列，以及包含以下處理步驟：

步驟1：從視頻流中獲取視頻幀進行緩存用于后續算法檢測，緩存至少1幀，每一幀圖像賦予唯一的幀序號；

步驟2：從視頻幀緩存中順序取出一幀圖像進行人臉檢測，對檢測到的人臉進行跟蹤并標記，給出一個ID值及人臉評分值，當前幀檢測完成之后輸出該幀所有檢測到的人臉的ID值、評分值、位置信息；

步驟3：處理算法輸出的人臉信息及人臉信息隊列，步驟2輸出的所有人臉信息與人臉信息記錄隊列上的人臉信息進行比較，更新隊列數據，每一個人臉只記錄最大評分值及其關聯的信息，包括ID值、評分值、位置信息以及對應原始視頻幀的幀序號；同時更新人臉預編碼數據信息，原始視頻幀被記錄一次也稱作被引用一次，引用計數增加一次；

步驟4：處理檢測的視頻幀及視頻幀緩存隊列，根據原始視頻幀被引用情況，更新緩存隊列及當前幀引用計數，刪除引用計數為0的視頻幀，然后進行當前幀入隊列處理；

步驟5：處理視頻中消失的人臉信息，獲取該人臉圖片編碼數據；

步驟6：將人臉編碼數據提供給后續服務端。

2.如權利要求1所述的基于嵌入式設備有限緩存的人臉檢測去重方法，其特征在于：檢測初始時，需要建立人臉信息記錄隊列，隊列以人臉ID值為索引，一個人臉ID一個節點，保存人臉評分值、位置信息、以及人臉位于視頻幀的幀序號，并在每一次檢測后，依據評分值，更新數據，只記錄最大評分值的信息；需要根據設備內存情況合理建立視頻幀緩存隊列，存放分析后的視頻幀，用于最終抓圖編碼使用。

3.如權利要求1所述的基于嵌入式設備有限緩存的人臉檢測去重方法，其特征在于：步驟1中從視頻流中獲取原始視頻幀，視頻幀可以是本地直接采集獲得，也可以是網絡視頻流解碼獲得，每一幀視頻均按照時間順序添加正向增長的幀序號，用于人臉檢測及編碼查找圖片索引使用。

4.如權利要求1所述的基于嵌入式設備有限緩存的人臉檢測去重方法，其特征在于：步驟2中從待分析的視頻幀緩存中順序取出一幀圖像進行檢測，對輸入的視頻幀進行人臉檢測；檢測完成之后，與之前檢測到的人臉信息進行比對，如果是同一個人臉則使用相同的ID值，如果是新增的人臉，標注新的ID值，至此完成人臉的跟蹤與ID標注工作；然后對所有檢測到的人臉進行綜合得分評價，評價維度包括人臉相似度、清晰度、人臉角度、分辨率、特征點數量5個維度，計算方法為：

其中n為加權項，f_i為各加權項評分函數，分數值歸一化到0–100；x_i為加權項評價系數，各加權項系數總和為1，

5.如權利要求1所述的基于嵌入式設備有限緩存的人臉檢測去重方法，其特征在于：步驟3中，處理算法輸出的人臉信息及人臉信息隊列，檢索人臉信息記錄隊列，(1)、若ID已經存在，判斷人臉評分值，如果當前檢測的評分值較大，則更新數據，同時更新預編碼數據信息，如果之前已經保存了人臉預編碼數據信息，則釋放人臉預編碼數據，反之不更新；(2)、若ID不存在，表明是新出現的人臉，新增一個節點，記錄新出現人臉的所有信息；(3)、若隊列中的ID在當前幀中未檢測到，則未檢出計數增加一次。

6.如權利要求1所述的基于嵌入式設備有限緩存的人臉檢測去重方法，其特征在于：步驟4中，處理檢測的視頻幀及視頻幀緩存隊列，視頻幀節點保存有被引用次數計數，處理完當前幀所有人臉信息之后，更新隊列上每個節點及當前幀的引用計數情況，更新完成之后：(1)、刪除隊列上引用計數為0的視頻幀，當前幀的引用計數為0也一并刪除；(2)、如果當前檢測的視頻幀引用計數不為0且隊列不滿，直接將當前幀加入到緩存隊列尾部；(3)、如果當前檢測的視頻幀引用計數不為0但是隊列是滿狀態，檢索緩存的視頻幀及當前視頻幀，挑選出引用計數最小的視頻幀，然后將該視頻幀上被引用的人臉進行預編碼，將編碼后的數據信息保存到人臉信息緩存隊列對應ID的節點上，然后刪除該視頻幀，最后進行當前檢測的視頻幀加入隊列處理。