[發明專利]一種直播場景自適應視頻編碼方法

在審

• 申請號: 202310454109.1
• 申請日: 2023-04-18
• 公開（公告）號: CN116489372A
• 公開（公告）日: 2023-07-25
• 發明（設計）人: 曾輝;龍仕強;陳智敏;魏文應;林曉帆;肖鐵軍;張偉民
• 申請（專利權）人: 廣東博華超高清創新中心有限公司
• 主分類號: H04N19/182
• 分類號: H04N19/182;H04N19/196;H04N19/11;H04N19/119;H04N21/2368;H04N21/2187
• 代理公司: 北京京萬通知識產權代理有限公司 11440
• 代理人: 萬學堂;王躍交

1.一種直播場景自適應視頻編碼方法，其特征在于，包括以下步驟：

S0.從攝像頭讀取一幀原始圖像數據；

S1.按照上下各兩個像素的田字形四個像素為一組，對步驟S0中讀取的圖像像素點依次進行分割，得到多個四像素組；

S2.對于步驟S1中分割的每一個四像素組，提取左上角的像素，將這些像素組成一幅新的圖像A；

S3.按照步驟S2的方法，將每一個四像素組的右上角、左下角、右下角的像素分別提取并組成新的圖像B、C、D，所述原始圖像被分割成四個分辨率降低一半的完整圖像A、B、C、D；

S4.將圖像A、B、C、D的對應每個像素點相加，再求平均值，得到一幅平均之后的圖像A'；

S5.對步驟S4中得到的平均之后的圖像A'采用進行編碼，記錄編碼過程中幀內預測得分最高的八種預測方式；

S6.對步驟S3中得到的所述圖像B、C、D進行編碼，采用步驟S5中記錄的幀內預測方式進行預測；

S7.重復步驟S0到步驟S6的步驟，進行下一幀圖像的處理和編碼，得到四路編碼后的視頻原始碼流1、2、3、4；

S8.將S7中得到的視頻原始碼流1和音頻數據進行復用封裝成傳輸碼流；

S9.其他三路原始碼流2、3、4直接封裝傳輸碼流；

S10.通過流媒體傳輸協議將四路傳輸碼流分別進行傳輸。

2.根據權利要求1所述的直播場景自適應視頻編碼方法，其特征在于，在步驟S0中，直播設備從所述攝像頭讀取一幀采集到的原始視頻數據，其為YUV格式。

3.根據權利要求1所述的直播場景自適應視頻編碼方法，其特征在于，在步驟S1中，對步驟S0中得到的一幀YUV數據進行分割，按照上下各兩個像素的四個像素為一組，對圖像像素點依次進行田字形分割，如果水平方向或者垂直方向的像素數不是2的整倍數，則將最右側一列或者最下面一行像素丟棄，保證能將圖像全部分割成田字形。

4.根據權利要求1所述的直播場景自適應視頻編碼方法，其特征在于，在步驟S2中，對于步驟S1中分割得到的每一個四像素組，提取田字左上角的像素，將這些像素按照原有的順序組成一幅新的圖像A，所述新的圖像A相較于原始圖像畫面是完整的，但是長和寬的分辨率只有原始圖像的一半。

5.根據權利要求1所述的直播場景自適應視頻編碼方法，其特征在于，在步驟S4中，對步驟S3中得到的四個圖像A、B、C、D進行平均，依次分別取圖像A、B、C、D中對應的像素，將四個像素YUV數據的Y值相加再除以四得到Y的平均值，按照同樣的方法處理四個像素YUV數據的U和V值，得到四個像素YUV的平均值，將四幅圖像所有的YUV平均值再組成一幅所述平均之后的圖像A'。

6.根據權利要求1所述的直播場景自適應視頻編碼方法，其特征在于，在步驟S5中，對步驟S4中得到所述平均之后的圖像A'采用第三代音視頻標準(AVS3)編碼格式進行編碼，記錄編碼過程中幀內預測得分前八的八種預測方式用于其他三幅圖像的幀內預測。

7.根據權利要求1所述的直播場景自適應視頻編碼方法，其特征在于，在步驟S6中，對S3中得到的所述圖像B、C、D進行編碼，采用S5中記錄的八種預測方式進行預測，由于所述圖像B、C、D的內容和所述平均之后的圖像A'相同，所以其幀內預測的方式是相同的，不需要遍歷所有的預測方式，只采用步驟S5中記錄的預測方式進行預測。

8.根據權利要求1所述的直播場景自適應視頻編碼方法，其特征在于，在步驟S8中，將S7中得到的視頻原始碼流1和麥克風采集的音頻數據進行復用，并且加上解碼時間戳(DTS)和顯示時間戳(PTS)信息，然后封裝成傳輸碼流。