[發明專利]視頻傳輸、直播與播放方法、設備及存儲介質

有效

• 申請號: 202010626671.4
• 申請日: 2020-07-01
• 公開（公告）號: CN113301355B
• 公開（公告）日: 2023-04-28
• 發明（設計）人: 孔祥振
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/2343;H04N21/4402;G06T5/00;H04L65/60;H04L65/80
• 代理公司: 北京太合九思知識產權代理有限公司 11610
• 代理人: 張愛;劉戈

1.一種視頻傳輸方法，其特征在于，包括：

獲取原始視頻流；

從所述原始視頻流中提取多張原始圖像，并獲取所述多張原始圖像對應的失真圖像；

根據所述多張原始圖像和多張失真圖像進行模型訓練，得到與所述原始視頻流適配的圖像增強模型；

將所述圖像增強模型和所述原始視頻流對應的視頻編碼流發送給視頻播放終端，以供所述視頻播放終端利用所述圖像增強模型對所述視頻編碼流進行圖像增強。

2.根據權利要求1所述的方法，其特征在于，獲取所述多張原始圖像對應的失真圖像，包括：

根據網絡狀態信息，對所述多張原始圖像進行失真處理，得到多張失真圖像；

或者

從所述視頻編碼流中提取與所述多張原始圖像對應的多張編碼圖像，對所述多張編碼圖像進行解碼處理，得到多張失真圖像。

3.根據權利要求1所述的方法，其特征在于，根據所述多張原始圖像和多張失真圖像進行模型訓練，得到與所述原始視頻流適配的圖像增強模型，包括：

獲取用于圖像增強的初始網絡模型；

利用所述多張原始圖像和多張失真圖像對所述初始網絡模型進行訓練，得到與所述原始視頻流適配的圖像增強模型。

4.根據權利要求3所述的方法，其特征在于，獲取用于圖像增強的初始網絡模型，包括：

根據產生所述原始視頻流時的場景特征和/或設備特征，確定與所述原始視頻流相似的目標視頻流；

獲取與所述目標視頻流適配的圖像增強模型，作為所述用于圖像增強的初始網絡模型。

5.根據權利要求1-4任一項所述的方法，其特征在于，所述原始視頻流包括在生成所述圖像增強模型前后獲取的第一部分原始視頻流和第二部分原始視頻流，則將所述原始視頻流對應的視頻編碼流發送給視頻播放終端，包括：

緩存所述第一部分原始視頻流對應的第一部分視頻編碼流；在生成所述圖像增強模型之后，將所述第一部分視頻編碼流以及所述第二部分原始視頻流對應的第二部分視頻編碼流與所述圖像增強模型一起發送給視頻播放終端。

6.根據權利要求1-4任一項所述的方法，其特征在于，生成與所述原始視頻流適配的圖像增強模型，包括：

接收視頻播放終端發送的指示視頻播放質量低于設定值的通知消息；

根據所述通知消息，生成與所述原始視頻流適配的圖像增強模型。

7.一種視頻播放方法，其特征在于，包括：

接收視頻編碼流以及對應的圖像增強模型，所述圖像增強模型為根據多張原始圖像和與所述多張原始圖像對應的多張失真圖像進行模型訓練，得到的與原始視頻流適配的圖像增強模型，其中，所述視頻編碼流為所述原始視頻流經過編碼后的視頻流，所述多張原始圖像為從所述原始視頻流中提取的；

對所述視頻編碼流進行解碼，以得到解碼后的視頻流；

將所述解碼后的視頻流輸入所述圖像增強模型進行圖像增強；

播放經所述圖像增強模型進行增強后的視頻流。

8.根據權利要求7所述的方法，其特征在于，接收視頻編碼流以及對應的圖像增強模型，包括：

在接收圖像增強模型之前接收第一部分視頻編碼流；以及同時接收所述圖像增強模型和第二部分視頻編碼流；

相應地，對所述視頻編碼流進行解碼，以得到解碼后的視頻流，包括：在接收所述圖像增強模型之前，對所述第一部分視頻編碼流進行解碼以得到第一解碼視頻流；以及在接收到所述第二部分視頻編碼流時對所述第二部分視頻編碼流進行解碼以得到第二解碼視頻流。

9.根據權利要求8所述的方法，其特征在于，還包括：在得到所述第一解碼視頻流后，緩存所述第一解碼視頻流直至接收到所述圖像增強模型；

相應地，將所述解碼后的視頻流輸入所述圖像增強模型進行圖像增強，包括：

在接收到所述圖像增強模型時，按照視頻流的時序依次將所述緩存的第一解碼視頻流和所述第二解碼視頻流輸入所述圖像增強模型進行圖像增強。