[發明專利]目標檢測跟蹤方法、裝置、電子設備和存儲介質

在審

• 申請號: 202010784786.6
• 申請日: 2020-08-06
• 公開（公告）號: CN111915639A
• 公開（公告）日: 2020-11-10
• 發明（設計）人: 項偉;王俊東;陳綠然;叫潔寧
• 申請（專利權）人: 廣州市百果園信息技術有限公司
• 主分類號: G06T7/20
• 分類號: G06T7/20;G06K9/00;G06N3/04;G06K9/32
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種目標檢測跟蹤方法，其特征在于，包括：

將從視頻流接收到的每個視頻幀輸入跟蹤網絡中得到所述視頻幀的目標跟蹤結果；

在所述視頻幀為關鍵幀時，將所述關鍵幀輸入檢測網絡并控制所述檢測網絡在接收延遲幀期間運行，以在接收完最后一幀延遲幀時輸出目標檢測結果，其中，所述關鍵幀為所述視頻流中用于目標檢測的視頻幀，所述延遲幀為所述關鍵幀后連續的、指定數量的視頻幀；

根據所述目標檢測結果和所述最后一幀延遲幀的目標跟蹤結果生成最終目標跟蹤結果。

2.根據權利要求1所述的方法，其特征在于，所述在所述視頻幀為關鍵幀時，將所述關鍵幀輸入檢測網絡中并控制所述檢測網絡在接收延遲幀期間運行，以在接收完最后一幀延遲幀時輸出目標檢測結果，包括：

在所述視頻幀為關鍵幀時，確定指定數量的延遲幀；

根據所述延遲幀的數量確定所述檢測網絡的多個計算節點；

在將所述關鍵幀輸入所述檢測網絡后，每接收到一個所述延遲幀時控制所述檢測網絡的多個計算節點依次開始運行，以在接收完最后一幀延遲幀時輸出目標檢測結果。

3.根據權利要求2所述的方法，其特征在于，所述檢測網絡為包括多個層級子網絡的級聯檢測網絡，所述在所述視頻幀為關鍵幀時，確定指定數量的延遲幀，包括：

獲取所述級聯檢測網絡的子網絡的第一數量；

根據所述第一數量，將所述關鍵幀后連續的多個視頻幀確定為延遲幀。

4.根據權利要求3所述的方法，其特征在于，所述根據所述延遲幀的數量確定所述檢測網絡的多個計算節點，包括：

將所述級聯檢測網絡的每個子網絡的輸入節點設置為計算節點。

5.根據權利要求4所述的方法，其特征在于，所述每接收到一個所述延遲幀時控制所述檢測網絡的多個計算節點依次開始運行，以在接收完最后一幀延遲幀時輸出目標檢測結果，包括：

在將所述關鍵幀輸入所述級聯檢測網絡的第一層級子網絡后，每接收到一個所述延遲幀時，將上一層級子網絡輸出的檢測結果和所述延遲幀輸入當前層級子網絡中；

在接收最后一幀延遲幀后，將所述當前層級子網絡輸出的檢測結果作為所述檢測網絡的目標檢測結果。

6.根據權利要求2所述的方法，其特征在于，所述檢測網絡為非級聯檢測網絡，所述在所述視頻幀為關鍵幀時，確定指定數量的延遲幀，包括：

確定所述關鍵幀后連續的、預設數量的視頻幀為延遲幀。

7.根據權利要求6所述的方法，其特征在于，所述根據所述延遲幀的數量確定所述檢測網絡的多個計算節點，包括：

預估所述檢測網絡對所述關鍵幀執行目標檢測所需要的總時長；

采用所述總時長和所述預設數量計算所述檢測網絡的計算節點的運行結束時間。

8.根據權利要求7所述的方法，其特征在于，所述在將所述關鍵幀輸入所述檢測網絡后，每接收到一個所述延遲幀時控制所述檢測網絡的多個計算節點依次開始運行，以在接收完最后一幀延遲幀時輸出目標檢測結果，包括：

在將所述關鍵幀輸入所述非級聯檢測網絡后，計算所述非級聯網絡的運行時間；

在所述運行時間為所述計算節點運行結束時間時，暫停運行所述非級聯檢測網絡；

當每接收到一個所述延遲幀時，從暫停的計算節點恢復運行所述非級聯檢測網絡；

在接收到最后一幀延遲幀時，將恢復運行后所述非級聯檢測網絡輸出的檢測結果作為所述檢測網絡的目標檢測結果。

9.根據權利要求1-8任一項所述的方法，其特征在于，在將所述關鍵幀輸入檢測網絡中并控制所述檢測網絡在接收延遲幀期間運行，以在接收完最后一幀延遲幀時輸出目標檢測結果之前，還包括：

判斷所述視頻幀是否為關鍵幀；

若是，執行將所述關鍵幀輸入檢測網絡中并控制所述檢測網絡在接收延遲幀期間運行，以在接收完最后一幀延遲幀時輸出目標檢測結果的步驟；

若否，輸出所述視頻幀的目標跟蹤結果。