[發(fā)明專利]視頻編碼方法、裝置、設備及存儲介質

在審

• 申請?zhí)枺?/td>: 202110320704.7
• 申請日: 2021-03-25
• 公開（公告）號: CN114765689A
• 公開（公告）日: 2022-07-19
• 發(fā)明（設計）人: 黃斌;彭巧巧;蒯多慈
• 申請（專利權）人: 華為云計算技術有限公司
• 主分類號: H04N19/597
• 分類號: H04N19/597;H04N19/513
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 顏晶

本申請?zhí)峁┝艘环N視頻編碼方法、裝置、設備及存儲介質，屬于視頻處理技術領域。在對視頻幀進行編碼時，根據(jù)生成該視頻幀時的渲染信息，以及生成該視頻幀的參考幀時的渲染信息，來確定該視頻幀中圖像塊的運動矢量，并對該視頻幀進行編碼。采用這種方法進行視頻編碼，能夠大大減少運動估計的計算量，加快視頻編碼速度，提高視頻編碼效率，進而有效降低端到端時延。

本申請要求于2021年01月14日提交的申請?zhí)枮?02110048292.6、發(fā)明名稱為“一種編碼的方法、裝置及系統(tǒng)”的中國專利申請的優(yōu)先權，其全部內容通過引用結合在本申請中。

技術領域

本申請涉及視頻處理技術領域，特別涉及一種視頻編碼方法、裝置、設備及存儲介質。

背景技術

隨著互聯(lián)網技術的快速發(fā)展，用戶能夠通過與云渲染計算平臺實現(xiàn)網絡連接的虛擬現(xiàn)實(virtual reality，VR)終端，來體驗運行在云渲染計算平臺上的VR應用。通常，云渲染計算平臺在渲染每一幀視頻時，都會生成具有一定視差的左、右眼視頻幀，分別對應于用戶的左眼視角和右眼視角，在對這兩個視頻幀進行編碼后，將其發(fā)送至VR終端，由VR終端進行解碼和顯示，使得用戶可以體驗到立體視覺的效果。

相關技術中，云渲染計算平臺在對左、右眼視頻幀進行編碼時，通常采用以下兩種方法：方法一、將左、右眼視頻幀進行拼接，得到一個視頻幀，然后基于標準編碼器對該視頻幀進行編碼，生成一路標準視頻碼流；方法二、基于標準編碼器對左、右眼視頻幀分別進行編碼，生成兩路標準視頻碼流。

在上述方法中，無論是將左、右眼視頻幀拼接后進行一路視頻編碼，還是將左、右眼視頻幀各進行一路視頻編碼，編碼的計算量均較大，導致視頻編碼的速度較慢，進而導致視頻編碼的效率不高。

發(fā)明內容

本申請實施例提供了一種視頻編碼方法、裝置、設備及存儲介質，能夠有效提高視頻編碼效率，降低端到端時延。該技術方案如下：

第一方面，提供了一種視頻編碼方法，該方法包括：獲取視頻幀，以及該視頻幀的參考幀，該視頻幀和該參考幀來自多視角圖像中的同一視角或者不同視角；基于第一渲染信息和第二渲染信息確定該視頻幀中圖像塊的運動矢量；其中，該第一渲染信息為生成該視頻幀時的渲染信息，該第二渲染信息為生成該參考幀時的渲染信息；基于該運動矢量編碼該視頻幀。

采用上述方法進行視頻編碼，能夠大大減少運動估計的計算量，加快視頻編碼速度，提高視頻編碼效率，進而有效降低端到端時延。

可選地，該視頻幀和該參考幀是運行虛擬現(xiàn)實VR應用時生成的，該視頻幀編碼后的數(shù)據(jù)用于在終端上解碼顯示，該第一位置、姿態(tài)信息，和該第二位置、姿態(tài)信息基于該終端的位置和姿態(tài)確定。

基于上述可選方式，可以基于終端來對服務器在運行虛擬現(xiàn)實VR應用所生成的數(shù)據(jù)進行顯示，且終端的位置和姿態(tài)可以影響服務器的渲染過程，從而實現(xiàn)VR顯示的目的。

可選地，該終端為手機、平板、可穿戴設備或分體式設備，該分體式設備包括顯示設備以及對應的控制設備。

基于上述可選方式，視頻幀編碼后的數(shù)據(jù)能夠在多種不同形式的終端上解碼顯示，本申請具有較為廣泛的適用性。

可選地，該可穿戴設備為頭戴式顯示器。

可選地，若該視頻幀與該參考幀來自同一視角，則該第一渲染信息包括渲染該視頻幀時虛擬相機的第一位置、姿態(tài)信息，以及該視頻幀的深度信息；該第二渲染信息包括渲染該參考幀時虛擬相機的第二位置、姿態(tài)信息，以及該參考幀的深度信息。