[發明專利]一種視頻處理方法、裝置、電子設備及存儲介質

有效

• 申請號: 202110055638.5
• 申請日: 2021-01-15
• 公開（公告）號: CN112911306B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 屈偉
• 申請（專利權）人: 北京奇藝世紀科技有限公司
• 主分類號: H04N19/436
• 分類號: H04N19/436;H04N19/61;H04N19/625;H04N19/124;H04N19/184;H04N19/91;H04N19/93;H04N19/96;G06T9/00;G06F9/50
• 代理公司: 北京華夏泰和知識產權代理有限公司 11662
• 代理人: 張麗穎;李雪

本發明提供一種視頻處理方法、裝置、電子設備及存儲介質，所述方法包括：創建與目標視頻對應的視頻抽幀子線程，由主線程將目標視頻的視頻信息發送中視頻抽幀子線程，由視頻抽幀子線程基于視頻信息對目標視頻進行抽幀，并將抽幀得到視頻幀圖像返回至主線程，由主線程對視頻幀圖像進行算法處理。本發明實施例采用流水線模式，通過將視頻抽幀和算法處理放在不同的線程中執行，實現了視頻抽幀和算法的同時無阻塞進行，可以有效地減少整體視頻處理時間。

技術領域

本申請涉及視頻處理領域，尤其涉及一種視頻處理方法、裝置、電子設備及存儲介質。

背景技術

深度學習算法經過長期的演進，目前無論是在精度還是在速度上都有較大的提升，也應用在各行各業中，其中在視頻行業中也大顯身手，例如：蒙版彈幕，AI(ArtificialIntelligence，人工智能)廣告，修復老片，視頻低俗血腥暴力實時性審核等。

目前利用深度學習算法對視頻進行處理，通常采用的方法是：先將視頻進行抽幀處理，將視頻幀全部轉換為jpg等格式，并將格式轉換后的圖像保存到硬盤，然后再由算法SDK(Software?Development?Kit，軟件開發工具包)從硬盤中讀取圖像并加載到內存上后進行處理。采用此種視頻處理方法對視頻進行處理耗費的總時間為視頻抽幀的時間、圖像存儲到硬盤的時間、從硬盤中讀取圖像的時間以及對圖像預處理的時間以及算法SDK處理的時間的總和，耗費的時間過多。

發明內容

為了解決現有的視頻處理耗費時間過多的技術問題，本申請提供了一種視頻處理方法、裝置、電子設備及存儲介質。

第一方面，本申請提供了一種視頻處理方法，包括：

創建與目標視頻對應的視頻抽幀子線程；

由主線程將所述目標視頻的視頻信息發送至所述視頻抽幀子線程；

由所述視頻抽幀子線程基于所述視頻信息對所述目標視頻進行抽幀，并將抽幀得到的視頻幀圖像返回至所述主線程；

由所述主線程對所述視頻幀圖像進行算法處理。

作為一種可能的實現方式，創建與目標視頻對應的視頻抽幀子線程，包括：

獲取目標視頻的視頻信息，所述視頻信息中至少包含所述目標視頻的視頻編碼格式；

基于所述視頻編碼格式確定與所述目標視頻對應的目標解碼組件；

創建與所述目標抽幀組件對應的視頻抽幀子線程，以作為與所述目標視頻對應的視頻抽幀子線程。

作為一種可能的實現方式，基于所述視頻編碼格式確定與所述目標視頻對應的目標抽幀組件，包括：

預先設置第一抽幀組件和第二抽幀組件，并預先設置第一抽幀組件支持的視頻編碼格式；

將所述目標視頻的視頻編碼格式與所述第一抽幀組件支持的視頻編碼格式進行匹配；

若所述目標視頻的視頻編碼格式與所述第一抽幀組件支持的視頻編碼格式相匹配，則確定所述第一抽幀組件為與所述目標視頻對應的目標抽幀組件；

若所述目標視頻的視頻編碼格式與所述第一抽幀組件支持的視頻編碼格式不匹配，則確定所述第二抽幀組件為與所述目標視頻對應的目標抽幀組件。

作為一種可能的實現方式，所述第一抽幀組件為GPU抽幀組件，所述第二抽幀組件為CPU抽幀組件。

作為一種可能的實現方式，若所述第一抽幀組件為與所述目標視頻對應的目標抽幀組件，則由所述視頻抽幀子線程基于所述目標視頻的視頻信息對所述目標視頻進行抽幀，包括：

由所述視頻抽幀子線程將所述目標視頻的視頻信息發送至所述第一抽幀組件，以使所述第一抽幀組件基于所述視頻信息對所述目標視頻進行抽幀；