[發明專利]一種視頻打碼方法、裝置以及電子設備

有效

• 申請號: 201910143376.0
• 申請日: 2019-02-26
• 公開（公告）號: CN111614959B
• 公開（公告）日: 2023-02-03
• 發明（設計）人: 茍巍;沈海峰
• 申請（專利權）人: 北京嘀嘀無限科技發展有限公司
• 主分類號: H04N19/132
• 分類號: H04N19/132;H04N19/172;H04N19/46
• 代理公司: 北京超成律師事務所 11646
• 代理人: 嚴誠

1.一種視頻打碼方法，其特征在于，包括：

從目標視頻的視頻幀序列中確定首個節點幀圖像，其中，所述首個節點幀圖像為包含有目標對象的首個視頻幀圖像；

按照設定的抽取間隔，從排在所述首個節點幀圖像之后的視頻幀圖像中選取其他節點幀圖像；

檢測每個所述節點幀圖像中的所述目標對象；

對每個所述節點幀圖像中的所述目標對象進行打碼；

基于所述視頻幀序列中相鄰節點幀圖像的目標對象的檢測結果，對相鄰節點幀圖像之間的視頻幀圖像進行打碼；

其中，從目標視頻的視頻幀序列中確定首個節點幀圖像，包括：

從所述視頻幀序列的第一個視頻幀圖像開始進行目標對象檢測，直至檢測到包含有目標對象的首個視頻幀圖像時，將所述包含有目標對象的首個視頻幀圖像作為所述首個節點幀圖像；

其中，基于所述視頻幀序列中相鄰節點幀圖像的目標對象的檢測結果，對相鄰節點幀圖像之間的視頻幀圖像進行打碼，包括：

對于所述視頻幀序列中相鄰節點幀圖像中的第一節點幀圖像和第二節點幀圖像，確定所述第一節點幀圖像包含的目標對象的第一檢測框組和所述第二節點幀圖像包含的目標對象的第二檢測框組；

從所述第一檢測框組和所述第二檢測框組中查找相互匹配的檢測框對，并基于查找到的所述檢測框對對所述第一節點幀圖像和所述第二節點幀圖像之間的視頻幀圖像進行插值打碼；

如果所述第一檢測框組和/或所述第二檢測框組中存在所述檢測框對之外的第三檢測框，根據所述第三檢測框對所述第一節點幀圖像和所述第二節點幀圖像之間的視頻幀圖像進行復用打碼。

2.根據權利要求1所述的方法，其特征在于，按照設定的抽取間隔，從排在所述首個節點幀圖像之后的視頻幀圖像中選取其他節點幀圖像的步驟，包括：

從排在所述首個節點幀圖像之后的視頻幀圖像中抽取多個節點幀圖像；其中，相鄰的兩個節點幀圖像之間的間隔為設定的抽取間隔。

3.根據權利要求1所述的方法，其特征在于，檢測每個所述節點幀圖像中的所述目標對象的步驟，包括：

將選取的所有所述節點幀圖像并行輸入至預設的目標檢測模型，通過所述目標檢測模型對所述節點幀圖像進行并行檢測，得到每個所述節點幀圖像的檢測結果。

4.根據權利要求1所述的方法，其特征在于，從所述第一檢測框組和所述第二檢測框組中查找相互匹配的檢測框對的步驟，包括：

計算所述第一檢測框組中的第一檢測框與所述第二檢測框組中的第二檢測框的位置重合度IOU；

將位置重合度高于預設位置閾值的第一檢測框和第二檢測框確定為相互匹配的檢測框對。

5.根據權利要求1所述的方法，其特征在于，從所述第一檢測框組和所述第二檢測框組中查找相互匹配的檢測框對的步驟，包括：

獲取所述第一檢測框組中的第一檢測框與所述第二檢測框組中的第二檢測框的圖像相似度；

將圖像相似度高于預設相似度閾值的第一檢測框和第二檢測框確定為相互匹配的檢測框對。

6.根據權利要求1所述的方法，其特征在于，從所述第一檢測框組和所述第二檢測框組中查找相互匹配的檢測框對的步驟，包括：

從所述第一檢測框組中的第一檢測框與所述第二檢測框組中的第二檢測框中，選擇圖像相似度高于預設相似度閾值且位置重合度高于預設位置閾值的檢測框，將選擇的所述檢測框確定為相互匹配的檢測框對。

7.根據權利要求1所述的方法，其特征在于，基于匹配框組對所述第一節點幀圖像和所述第二節點幀圖像之間的視頻幀圖像進行插值打碼的步驟，包括：

根據所述檢測框對中的第一檢測框的位置和第二檢測框的位置，采用插值法確定所述第一節點幀圖像和所述第二節點幀圖像之間的視頻幀圖像中的待打碼位置，對所述待打碼位置進行打碼。