[發明專利]直播數據流交互方法、裝置、服務器及可讀存儲介質

在審

• 申請號: 202110990793.6
• 申請日: 2021-08-26
• 公開（公告）號: CN113709512A
• 公開（公告）日: 2021-11-26
• 發明（設計）人: 劉嘉威
• 申請（專利權）人: 廣州虎牙科技有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/2343;H04N21/4402;H04N21/4788
• 代理公司: 成都極刻智慧知識產權代理事務所(普通合伙) 51310
• 代理人: 唐維虎

1.一種直播數據流交互方法，其特征在于，應用于直播數據流交互系統，所述直播數據流交互系統包括服務器以及與所述服務器通信連接的直播提供終端和直播觀看終端，所述方法包括：

所述直播提供終端對待交互的直播視頻流進行特征殘缺化處理，獲得殘缺化視頻流，并將所述殘缺化視頻流發送給所述服務器，所述殘缺化視頻流與所述直播視頻流存在至少一個殘缺化維度的內容損失；

所述服務器對所述殘缺化視頻流進行完整內容重繪，獲得所述殘缺化視頻流對應的重繪視頻流，并將所述重繪視頻流進行壓縮后將壓縮視頻流發送給所述直播觀看終端；

所述直播觀看終端對所述壓縮視頻流進行轉換以將轉換視頻流進行顯示。

2.根據權利要求1所述的直播數據流交互方法，其特征在于，所述直播提供終端對待交互的直播視頻流進行特征殘缺化處理，獲得殘缺化視頻流的步驟中，所述特征殘缺化處理包括以下方式中的一種或者多種的組合：

對所述待交互的直播視頻流進行尺寸裁剪；

對所述待交互的直播視頻流的色彩度進行降低；

對所述待交互的直播視頻流中的部分視頻幀進行剔除。

3.根據權利要求1所述的直播數據流交互方法，其特征在于，所述服務器對所述殘缺化視頻流進行完整內容重繪，獲得所述殘缺化視頻流對應的重繪視頻流的步驟，包括：

將所述殘缺化視頻流輸入到預先訓練的完整內容重繪模型中，基于所述完整內容重繪模型預測所述殘缺化視頻流中的殘缺內容信息；

基于預測的殘缺內容信息對所述殘缺化視頻流進行內容重繪，獲得所述殘缺化視頻流對應的重繪視頻流。

4.根據權利要求1-3中任意一項所述的直播數據流交互方法，其特征在于，所述方法還包括：

獲取針對每個目標可直播活動的原始訓練圖像數據，其中，所述目標可直播活動具有規則化的圖像特征；

對所述原始訓練圖像數據進行特征殘缺化處理，獲得殘缺化訓練圖像數據以及所述殘缺化訓練圖像數據對應的標注殘缺部分數據，所述殘缺化訓練圖像數據與所述原始訓練圖像數據存在至少一個殘缺化維度的內容損失；

根據所述殘缺化訓練圖像數據以及所述殘缺化訓練圖像數據對應的標注殘缺部分數據對初始內容重繪模型進行訓練，獲得完整內容重繪模型。

5.根據權利要求4所述的直播數據流交互方法，其特征在于，所述根據所述殘缺化訓練圖像數據以及所述殘缺化訓練圖像數據對應的標注殘缺部分數據對初始內容重繪模型進行訓練，獲得完整內容重繪模型的步驟，包括：

將所述殘缺化訓練圖像數據輸入到初始內容重繪模型中，基于所述初始內容重繪模型對所述殘缺化訓練圖像數據中的殘缺內容信息進行預測；

基于預測的殘缺內容信息和對應的標注殘缺部分數據，確定針對所述預測的殘缺內容信息的預測誤差參數，并基于所述預測誤差參數對初始內容重繪模型的模型參數信息進行調整后繼續迭代訓練，直到所述預測誤差參數收斂時，輸出訓練完成的完整內容重繪模型。

6.根據權利要求1所述的直播數據流交互方法，其特征在于，所述直播觀看終端對所述壓縮視頻流進行轉換以將轉換視頻流進行顯示的步驟，包括：

所述直播觀看終端將所述壓縮視頻流輸入到預先訓練的預設分辨率對應的視頻流轉換模型中，基于所述視頻流轉換模型將所述壓縮視頻流的分辨率轉換為預設分辨率后，將轉換視頻流進行顯示。

7.根據權利要求6所述的直播數據流交互方法，其特征在于，所述方法還包括：

獲取訓練樣本數據，其中，所述訓練樣本數據包括第一分辨率的第一視頻流樣本數據和對應的第二分辨率的第二視頻流樣本數據；

將所述第一視頻流樣本數據輸入到初始視頻流轉換模型中，基于所述初始視頻流轉換模型對所述第一視頻流樣本數據進行針對于所述第二分辨率的轉換，獲得第三視頻流樣本數據；

根據所述第三視頻流樣本數據與所述第二視頻流樣本數據之間的差異對所述初始視頻流轉換模型進行訓練，獲得訓練完成的視頻流轉換模型。