[發明專利]視頻數據的編解碼方法和裝置、存儲介質及電子設備

在審

• 申請號: 202210095199.5
• 申請日: 2022-01-26
• 公開（公告）號: CN114466224A
• 公開（公告）日: 2022-05-10
• 發明（設計）人: 周濟;蔡海軍
• 申請（專利權）人: 廣州繁星互娛信息科技有限公司
• 主分類號: H04N21/2343
• 分類號: H04N21/2343;H04N21/238;H04N21/4363;H04N21/4402
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 周婷婷

1.一種視頻數據的編解碼方法，其特征在于，包括：

在檢測到當前網絡條件未達到預設網絡條件的情況下，確定當前待編碼視頻流中的關鍵視頻幀；

獲取所述待編碼視頻流中與所述關鍵視頻幀關聯的多幀關聯視頻幀以及所述多幀關聯視頻幀中每幀關聯視頻幀的關鍵點數據；

將與所述多幀關聯視頻幀分別對應的多組關鍵點編碼數據添加在關鍵編碼數據的預設字段中，構建傳輸數據，其中，所述關鍵編碼數據為對所述關鍵視頻幀進行數據編碼得到的數據，所述關鍵點編碼數據包括所述關聯視頻幀的所述關鍵點數據的編碼數據，所述傳輸數據用于發送給解碼端，以使所述解碼端基于所述傳輸數據得到所述關鍵視頻幀和與所述關鍵視頻幀關聯的所述多幀關聯視頻幀。

2.根據權利要求1所述的方法，其特征在于，所述確定當前待編碼視頻流中的關鍵視頻幀包括：

將所述待編碼視頻流中當前位于待編碼首位的視頻幀確定為所述關鍵視頻幀；或

將所述待編碼視頻流中包括全部預設特征關鍵點的視頻幀作為所述關鍵視頻幀。

3.根據權利要求2所述的方法，其特征在于，所述獲取所述待編碼視頻流中與所述關鍵視頻幀關聯的多幀關聯視頻幀以及所述多幀關聯視頻幀中每幀關聯視頻幀的關鍵點數據包括：

使用識別算法對依次對所述每幀關聯視頻幀進行特征關鍵點識別，其中，所述特征關鍵點用于標識所述待編碼視頻流中的目標對象；

將識別出的所述特征關鍵點的數據作為所述關聯視頻幀的關鍵點數據。

4.根據權利要求1所述的方法，其特征在于，在將與所述多幀關聯視頻幀分別對應的多組關鍵點編碼數據添加在關鍵編碼數據的預設字段中之前，還包括：

依次確定所述每幀關聯視頻幀與所述關鍵視頻幀的幀序關系；

將所述幀序關系和所述關鍵點數據進行數據編碼，得到所述關鍵點編碼數據；

對所述關鍵視頻幀進行數據編碼，得到所述關鍵編碼數據。

5.根據權利要求4所述的方法，其特征在于，所述將與所述多幀關聯視頻幀分別對應的多組關鍵點編碼數據添加在關鍵編碼數據的預設字段中，構建傳輸數據包括：

依次將所述每幀關聯視頻幀的所述關鍵點編碼數據添加在所述關鍵編碼數據的預設字段中；

將添加了全部所述關聯視頻幀的所述關鍵點編碼數據的所述關鍵編碼數據作為所述傳輸數據。

6.一種視頻數據的編解碼方法，其特征在于，包括：

在接收到編碼端發送的傳輸數據的情況下，確定所述傳輸數據中包括的關鍵編碼數據和位于所述關鍵編碼數據的預設字段中的多組關鍵點編碼數據；

解碼所述關鍵編碼數據和所述多組關鍵點編碼數據，得到關鍵視頻幀和與所述關鍵視頻幀關聯的多幀關聯視頻幀的關鍵點數據，其中，所述關鍵點數據為所述關聯視頻幀中與所述關鍵視頻幀的目標關鍵點對應的數據；

將所述關鍵點數據和所述關鍵視頻幀輸入生成對抗網絡，獲取所述生成對抗網絡輸出的模擬關聯視頻幀，其中，所述生成對抗網絡被訓練為利用所述關鍵視頻幀對所述關鍵點數據進行圖像還原生成。

7.根據權利要求6所述的方法，其特征在于：

在將所述關鍵點數據和所述關鍵視頻幀輸入生成對抗網絡之前，還包括：計算所述關鍵點數據與所述關鍵視頻幀中對應的目標關鍵點數據之間的運動偏移參數；

所述將所述關鍵點數據和所述關鍵視頻幀輸入生成對抗網絡包括：依次將所述關鍵視頻幀、所述關聯視頻幀的關鍵點數據和所述運動偏移參數輸入所述生成對抗網絡，以獲取所述生成對抗網絡輸出的所述模擬關聯視頻幀。

8.根據權利要求6所述的方法，其特征在于，在獲取所述生成對抗網絡輸出的模擬關聯視頻幀之后，還包括：

獲取所述模擬關聯視頻幀對應的幀序關系，其中，所述幀序關系用于指示所述模擬關聯視頻幀與所述關鍵視頻幀的相對幀序；

根據所述幀序關系，確定多幀所述模擬關聯視頻幀與所述關鍵視頻幀的播放順序；

按照所述播放順序依次播放所述關鍵視頻幀和多幀所述模擬關聯視頻幀。