[發明專利]設備性能測試方法、裝置、存儲介質及電子設備

在審

• 申請號: 202011415458.5
• 申請日: 2020-12-02
• 公開（公告）號: CN112631896A
• 公開（公告）日: 2021-04-09
• 發明（設計）人: 生壯;高彥平;石心
• 申請（專利權）人: 武漢曠視金智科技有限公司;北京邁格威科技有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06K9/03
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 何少巖

本申請涉及人臉識別技術領域，提供一種設備性能測試方法、裝置、存儲介質及電子設備。其中，性能測試方法包括：向待測試的人臉識別設備提供測試視頻流；獲取人臉識別設備輸出的測試結果；基于測試結果與測試視頻流的參考庫中的數據計算人臉識別設備的性能指標，該參考庫中的數據是根據測試視頻流中的可抓拍對象確定的。上述方法在測試人臉識別設備的性能時，整個測試流程從提供視頻流到計算性能指標都是自動完整的，顯著提高了測試效率，也便于進行大量測試。并且，采用自動化流程還有利于避免手工統計中存在的錯誤，提高性能指標計算的精確性，此外，性能測試所使用的視頻流可以反復使用，有利于從源頭上改善測試的準確性。

技術領域

本發明涉及人臉識別技術領域，具體而言，涉及一種設備性能測試方法、裝置、存儲介質及電子設備。

背景技術

目前人臉識別設備廣泛應用于需要進行行人身份識別的場景中，如安防、門禁等。一方面，有必要對生產出來的人臉識別設備進行性能(主要指在設備在抓拍、識別方面的能力)測試，測試合格后方可投入市場。另一方面，用戶在從大量的人臉識別設備中選擇符合自身要求的產品時，也需要對這些人臉識別設備進行性能測試。然而，在現有技術中，通常采用手工統計的方法測試人臉識別設備的性能，其測試效率低下。

發明內容

本申請實施例的目的在于提供一種設備性能測試方法、裝置、存儲介質及電子設備，以改善上述技術問題。

為實現上述目的，本申請提供如下技術方案：

第一方面，本申請實施例提供一種設備性能測試方法，包括：向待測試的人臉識別設備提供測試視頻流；獲取所述人臉識別設備輸出的測試結果；基于所述測試結果與所述測試視頻流的參考庫中的數據計算所述人臉識別設備的性能指標；其中，所述參考庫中的數據是根據所述測試視頻流中的可抓拍對象確定的。

上述方法在測試人臉識別設備的性能時，整個測試流程從提供視頻流到計算性能指標都是自動完整的，無需人工介入，顯著提高了測試效率，也便于進行大量測試。并且，采用自動化流程還有利于避免手工統計中存在的錯誤，提高性能指標計算的精確性，進而更準確地評估人臉識別設備的性能。此外，性能測試所使用的視頻流可以反復使用，這也保證了每次測試具有相同的輸入，有利于從源頭上改善測試的準確性。

在第一方面的一種實現方式中，所述測試結果包括所述測試視頻流中的人臉的抓拍結果集，所述參考庫包括所述測試視頻流中的人臉的標準抓拍庫，所述標準抓拍庫包括預先從所述測試視頻流中截取的所有可抓拍對象的人臉圖片；所述基于所述測試結果與所述測試視頻流的參考庫中的數據計算所述人臉識別設備的性能指標，包括：基于所述抓拍結果集中的圖片與所述標準抓拍庫中的圖片的比中情況計算所述人臉識別設備的性能指標。

在上述實現方式中，可對人臉識別設備的抓拍性能進行測試。由于人臉識別設備在進行人臉識別前首先要進行人臉抓拍，因此對其抓拍性能的測試也具有很高的實用價值。可以理解的，純粹的抓拍設備(不具有人臉識別功能)也可以用此種方法進行抓拍性能的測試。

在第一方面的一種實現方式中，所述標準抓拍庫還包括所述可抓拍對象在所述測試視頻流中出現的次數，所述人臉識別設備的性能指標包括漏抓次數、總漏抓次數、誤抓次數、重復抓拍次數、總重復抓拍次數、第一正確抓拍次數、第二正確抓拍次數中的至少一個；其中，所述標準抓拍庫中可抓拍對象的所述漏抓次數利用所述可抓拍對象在所述標準抓拍庫中出現的次數減去其被所述抓拍結果集比中的次數得到；所述總漏抓次數為所述標準抓拍庫中所有可抓拍對象的漏抓次數之和；所述誤抓次數為所述抓拍結果集未比中所述標準抓拍庫的次數；所述標準抓拍庫中可抓拍對象的所述重復抓拍次數利用所述可抓拍對象被所述抓拍結果集比中的次數減去其在所述標準抓拍庫中出現的次數得到；所述總重復抓拍次數為所述標準抓拍庫中所有可抓拍對象的重復抓拍次數之和；所述第一正確抓拍次數利用所述抓拍結果集比中所述標準抓拍庫的次數減去所述總重復抓拍次數得到；所述第二正確抓拍次數為所述抓拍結果集比中所述標準抓拍庫的次數。