[發明專利]軟硬結合的音視頻編解碼裝置

在審

• 申請號: 202011056791.1
• 申請日: 2020-09-30
• 公開（公告）號: CN112165623A
• 公開（公告）日: 2021-01-01
• 發明（設計）人: 林青山
• 申請（專利權）人: 廣州光錐元信息科技有限公司
• 主分類號: H04N19/42
• 分類號: H04N19/42;H04N19/44;H04N21/426;H04N21/44;H04N21/439;H04N21/81
• 代理公司: 北京細軟智谷知識產權代理有限責任公司 11471
• 代理人: 譚承世

本發明涉及一種軟硬結合的音視頻編解碼裝置，包括解碼性能均衡模塊、視頻硬解碼模塊、視頻軟解碼模塊、音頻軟解碼模塊、編碼性能均衡模塊、音視頻硬編碼模塊和音視頻軟編碼模塊。本發明通過綜合評估智能終端CPU和編解碼DSP的動態性能，將手機的軟編解碼方式和硬編解碼方式結合起來共同進行音視頻的編解碼處理，能夠同時充分發揮手機CPU和編解碼DSP部件的性能，因此可以提高音視頻的編解碼效率，即使在多音視頻同時編輯的場景下，也有較高的編解碼效率，為操作者帶來良好的音視頻編輯體驗。

技術領域

本發明屬于音視頻編解碼技術領域，具體涉及一種軟硬結合的音視頻編解碼裝置。

背景技術

隨著移動端手機市場的飛速發展和移動網絡的不斷升級，以音視頻為載體的娛樂內容呈爆炸式增長，在安卓移動端有較多的音視頻處理裝置來滿足人們對音視頻編輯的需求。音視頻編輯的核心基礎是音視頻編解碼技術，目前市面上的音視頻編解碼方式基本分為兩種：一種是以通用格式的編解碼算法使用CPU部件計算處理的軟編解碼方式；另一種是采用手機裝置級芯片上的編解碼DSP硬件裝置以硬編解碼的方式進行處理。隨著人們對視頻分辨率的追求不斷提高，編解碼的處理數據量也在成倍的增長，如何提高編解碼效率已經成為音視頻處理的核心問題。

相關技術中，編解碼方式都是單一的使用CPU進行軟編解碼或者單一的使用編解碼DSP進行硬編解碼，這樣的實現方式導致在編解碼過程中手機的一部分運算部件處于空閑狀態，從而無法完全利用手機各部件的性能，有可能以CPU為運算核心的軟編解碼已經不堪重負了，而以編解碼DSP為運算核心的硬編解碼卻空閑沒有任務，或者以編解碼DSP為核心的硬編解碼已經任務飽和了，而以CPU為運算核心的軟編解碼卻空閑等待，這樣一來，嚴重浪費了設備現有的硬件資源，造成了編解碼效率較低的問題，尤其是有多個音視頻同時處理的時候，效率低下的問題尤其明顯，給用戶造成了不友好的音視頻編輯體驗。

發明內容

有鑒于此，本發明的目的在于克服現有技術的不足，提供一種軟硬結合的音視頻編解碼裝置，以解決現有技術中多個音視頻同時處理的時候效率低下，給用戶造成了不友好的音視頻編輯體驗的問題。

為實現以上目的，本發明采用如下技術方案：一種軟硬結合的音視頻編解碼裝置，包括：

解碼性能均衡模塊，用于評估智能終端的解碼能力，根據所述解碼能力確定音視頻解碼的配置；

視頻硬解碼模塊，用于使用視頻硬解碼部件采用解碼算法對視頻文件進行硬解碼，得到可自定義顯示和編輯的圖像原始數據；

視頻軟解碼模塊，用于使用視頻軟解碼部件采用解碼算法對視頻文件進行軟解碼，得到可自定義顯示和編輯的圖像原始數據；

音頻軟解碼模塊，用于使用音頻軟解碼部件采用解碼算法對視頻文件的音頻數據進行解碼，得到可播放編輯的音頻原始數據；

編碼性能均衡模塊，用于評估智能終端的編碼能力，根據所述編碼能力確定音視頻編碼的配置和處理路徑；

音視頻硬編碼模塊，用于使用音視頻硬編碼部件采用編碼算法對所述圖像原始數據、音頻原始數據進行壓縮編碼，生成最終的視頻文件；

音視頻軟編碼模塊，用于使用音視頻軟編碼部件采用編碼算法對所述圖像原始數據、音頻原始數據進行壓縮編碼，生成最終的視頻文件。

進一步的，所述評估智能終端的解碼能力，根據所述解碼能力確定音視頻解碼的配置，包括：

載入解碼算法數據并獲取智能終端的CPU和編解碼DSP的性能信息；

采用性能評估算法評估所述智能終端的編解碼能力；

獲取待處理音視頻，計算所述待處理音視頻的基本信息；

根據所述基本信息、正在解碼的音視頻的個數、CPU及編解碼DSP動態調整所述待處理音視頻的解碼配置；