[發明專利]目標檢測跟蹤方法、裝置、電子設備和存儲介質

在審

• 申請號: 202010784786.6
• 申請日: 2020-08-06
• 公開（公告）號: CN111915639A
• 公開（公告）日: 2020-11-10
• 發明（設計）人: 項偉;王俊東;陳綠然;叫潔寧
• 申請（專利權）人: 廣州市百果園信息技術有限公司
• 主分類號: G06T7/20
• 分類號: G06T7/20;G06K9/00;G06N3/04;G06K9/32
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發明實施例公開了一種目標檢測跟蹤方法、裝置、電子設備和存儲介質，該方法包括：將從視頻流接收到的每個視頻幀輸入跟蹤網絡中得到視頻幀的目標跟蹤結果，在視頻幀為關鍵幀時將關鍵幀輸入檢測網絡并控制檢測網絡在接收延遲幀期間運行，以在接收完最后一幀延遲幀時輸出目標檢測結果，根據目標檢測結果和最后一幀延遲幀的目標跟蹤結果生成最終目標跟蹤結果。通過控制檢測網絡在接收多個延遲幀期間運行，將目標檢測的耗時分攤到接收多個延遲幀期間，大大削減了在關鍵幀處目標檢測的耗時峰值，在播放關鍵幀后能夠及時播放下一視頻幀，使得視頻能夠以預設的幀率播放以保證視頻流暢地播放。

技術領域

本發明實施例涉及視頻處理技術領域，尤其涉及一種目標檢測跟蹤方法、裝置、電子設備和存儲介質。

背景技術

隨著移動終端硬件容量的增加和性能的提升，視頻和圖像在移動終端上被人們廣泛的生產、使用和傳播，而視頻中的目標檢測和跟蹤作為智能視頻內容理解的一部分也受到極大的關注。

目前，目標檢測跟蹤框架包括檢測算法和跟蹤算法，檢測算法負責定位和識別視頻中的目標物體，跟蹤算法則對視頻中的目標物體進行跟蹤和平滑。具體地，通常在關鍵幀進行目標檢測，而在非關鍵幀(也稱跟蹤幀)時，目標物體可通過跟蹤算法進行跟蹤。然而，在關鍵幀時，由于檢測算法耗時長，導致在關鍵幀時檢測和跟蹤的耗時峰值陡增，在檢測算法運行結束后才接收下一視頻幀，進而容易造成計算資源有限的移動終端在接收關鍵幀后發生卡頓等問題，最終降低了用戶的使用體驗。

發明內容

本發明實施例提供一種目標檢測跟蹤方法、裝置、電子設備和存儲介質，以解決現有技術中目標檢測跟蹤方法應用于移動終端時容易造成移動終端卡頓的問題。

第一方面，本發明實施例提供了一種目標檢測跟蹤方法，包括：

將從視頻流接收到的每個視頻幀輸入跟蹤網絡中得到所述視頻幀的目標跟蹤結果；

在所述視頻幀為關鍵幀時，將所述關鍵幀輸入檢測網絡并控制所述檢測網絡在接收延遲幀期間運行，以在接收完最后一幀延遲幀時輸出目標檢測結果，其中，所述關鍵幀為所述視頻流中用于目標檢測的視頻幀，所述延遲幀為所述關鍵幀后連續的、指定數量的視頻幀；

根據所述目標檢測結果和所述最后一幀延遲幀的目標跟蹤結果生成最終目標跟蹤結果。

第二方面，本發明實施例提供了一種目標檢測跟蹤裝置，包括：

跟蹤模塊，用于將從視頻流接收到的每個視頻幀輸入跟蹤網絡中得到所述視頻幀的目標跟蹤結果；

檢測模塊，用于在所述視頻幀為關鍵幀時，將所述關鍵幀輸入檢測網絡并控制所述檢測網絡在接收延遲幀期間運行，以在接收完最后一幀延遲幀時輸出目標檢測結果，其中，所述關鍵幀為所述視頻流中用于目標檢測的視頻幀，所述延遲幀為所述關鍵幀后連續的、指定數量的視頻幀；

檢測跟蹤結果生成模塊，用于根據所述目標檢測結果和所述最后一幀延遲幀的目標跟蹤結果生成最終目標跟蹤結果。

第三方面，本發明實施例提供了一種電子設備，所述電子設備包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當所述一個或多個程序被所述一個或多個處理器執行，使得所述一個或多個處理器實現本發明任一實施例所述的目標檢測跟蹤方法。

第四方面，本發明實施例提供了一種計算機可讀存儲介質，其上存儲有計算機程序，該程序被處理器執行時實現本發明任一實施例所述的目標檢測跟蹤方法。