[發明專利]一種確定關鍵幀的方法及裝置

在審

• 申請號: 202010385239.0
• 申請日: 2020-05-09
• 公開（公告）號: CN111753642A
• 公開（公告）日: 2020-10-09
• 發明（設計）人: 刁奇;劉鵬;謝雨
• 申請（專利權）人: 三生萬物（北京）人工智能技術有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 劉亞飛

本發明提供了一種確定關鍵幀的方法及裝置，其中，該確定關鍵幀的方法包括：對各待處理圖像幀進行圖像分析，確定各所述待處理圖像幀中的實體對象所屬的實體類型；根據各所述待處理圖像幀中的實體對象所屬的實體類型，對各所述待處理圖像幀進行分組，得到各實體類型對應的圖像幀組；對于每一圖像幀組，依據該圖像幀組中待處理圖像幀的時間戳信息，對該圖像幀組中包含的待處理圖像幀進行分類，得到所述時間戳信息相匹配的待處理圖像幀的圖像幀集合；針對每一所述圖像幀集合，對該圖像幀集合中的實體對象以及背景圖像進行圖像合成，將圖像合成的結果作為該圖像幀集合對應的關鍵幀，可以提高對關鍵幀的圖像分析的準確度。

技術領域

本發明涉及圖像分析技術領域，具體而言，涉及一種確定關鍵幀的方法及裝置。

背景技術

在對捕捉到的畫面圖像進行圖像分析時，由于捕捉到的圖像幀數量較為龐大，因此，為了減輕后端處理器對于圖像分析的負載壓力，往往需要從捕捉到的圖像幀中，抽取部分圖像幀作為圖像分析的關鍵幀。如何確定待抽取的關鍵幀，進而提高對關鍵幀的圖像分析的準確度，成為當前圖像分析技術領域迫切需要解決的技術問題。

目前的方法，對于一段連續時間內捕捉到的圖像幀，可以預先設置關鍵幀的抽取時間間隔，然后根據該抽取時間間隔，從捕捉到的圖像幀中，定時的抽取圖像幀，將抽取的圖像幀作為圖像分析的關鍵幀，傳輸給后端處理器。這種確定關鍵幀的方法，依據固定的時間間隔，定時的確定關鍵幀，由于對關鍵幀包含的圖像信息并沒有進行限定，僅減少了待分析的關鍵幀數量，因此，抽取出的每一關鍵幀的圖像分析價值較低，進而導致關鍵幀的圖像分析的準確度較低。

發明內容

有鑒于此，本發明的目的在于提供一種確定關鍵幀的方法及裝置，以提高對關鍵幀的圖像分析的準確度。

第一方面，本發明實施例提供了確定關鍵幀的方法，所述方法包括：

對各待處理圖像幀進行圖像分析，確定各所述待處理圖像幀中的實體對象所屬的實體類型；

根據各所述待處理圖像幀中的實體對象所屬的實體類型，對各所述待處理圖像幀進行分組，得到各實體類型對應的圖像幀組；

對于每一圖像幀組，依據該圖像幀組中待處理圖像幀的時間戳信息，對該圖像幀組中包含的待處理圖像幀進行分類，得到所述時間戳信息相匹配的待處理圖像幀的圖像幀集合；

針對每一所述圖像幀集合，對該圖像幀集合中的實體對象以及背景圖像進行圖像合成，將圖像合成的結果作為該圖像幀集合對應的關鍵幀。

可選地，在所述依據該圖像幀組中待處理圖像幀的時間戳信息，對該圖像幀組中包含的待處理圖像幀進行分類之前，所述方法還包括：

從預先設置的實體類型與實體評價指標的映射關系庫中，獲取該圖像幀組對應的實體類型映射的實體評價指標；

針對該圖像幀組中包含的每一實體對象，利用各所述實體評價指標對應的指標值計算公式，計算該實體對象對應的各所述實體評價指標的指標值；

依據該實體對象對應的各所述實體評價指標的指標值以及該實體評價指標對應的指標權重值，進行加權求和，將加權求和的結果作為該實體對象對應的圖像分值；

依據預先設置的圖像分數閾值，刪除該圖像幀組中所述圖像分值小于所述圖像分數閾值的實體對象所在的待處理圖像幀。

可選地，所述利用各所述實體評價指標對應的指標值計算公式，計算該實體對象對應的各所述實體評價指標的指標值，包括：

當所述實體評價指標為圖像占比指標時，從該實體對象所在的待處理圖像幀中，獲取該待處理圖像幀的圖像面積，以及該實體對象的圖像面積；

計算該實體對象在該待處理圖像幀中的圖像面積占比值，將計算得到的所述圖像面積占比值作為該實體對象對應的所述圖像占比指標的指標值。