[發(fā)明專利]直播數(shù)據(jù)流交互方法、裝置、服務(wù)器及可讀存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110990793.6
• 申請(qǐng)日: 2021-08-26
• 公開（公告）號(hào): CN113709512A
• 公開（公告）日: 2021-11-26
• 發(fā)明（設(shè)計(jì)）人: 劉嘉威
• 申請(qǐng)（專利權(quán)）人: 廣州虎牙科技有限公司
• 主分類號(hào): H04N21/2187
• 分類號(hào): H04N21/2187;H04N21/2343;H04N21/4402;H04N21/4788
• 代理公司: 成都極刻智慧知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 51310
• 代理人: 唐維虎

本申請(qǐng)實(shí)施例提供一種直播數(shù)據(jù)流交互方法、裝置、服務(wù)器及可讀存儲(chǔ)介質(zhì)，直播提供終端在直播交互過程中通過對(duì)待交互的直播視頻流進(jìn)行特征殘缺化處理后發(fā)送殘缺化視頻流給服務(wù)器，可以有效節(jié)省數(shù)據(jù)傳輸量，提高數(shù)據(jù)傳輸速度，而后服務(wù)器對(duì)殘缺化視頻流進(jìn)行完整內(nèi)容重繪，將重繪視頻流進(jìn)行壓縮后將壓縮視頻流發(fā)送給直播觀看終端，通過直播內(nèi)容完整性的預(yù)測(cè)與重繪，可以降低直播觀看終端的性能資源消耗，并且只是發(fā)送壓縮視頻流至直播觀看終端，也極大節(jié)省了數(shù)據(jù)傳輸量，而后直播觀看終端可對(duì)壓縮視頻流進(jìn)行轉(zhuǎn)換以將轉(zhuǎn)換視頻流進(jìn)行顯示，進(jìn)而在保障觀看體驗(yàn)的同時(shí)極大降低傳輸數(shù)據(jù)量，降低帶寬成本和直播延遲。

技術(shù)領(lǐng)域

本申請(qǐng)涉及移動(dòng)互聯(lián)網(wǎng)直播技術(shù)領(lǐng)域，具體而言，涉及一種直播數(shù)據(jù)流交互方法、裝置、服務(wù)器及可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

在移動(dòng)互聯(lián)網(wǎng)終端的直播過程中，直播平臺(tái)的視頻直播延遲性能可能會(huì)影響用戶互動(dòng)，或者影響用戶獲取關(guān)鍵信息的時(shí)機(jī)，從而對(duì)用戶體驗(yàn)造成較大影響。基于此，如何在保障觀看體驗(yàn)的同時(shí)，有效改善直播平臺(tái)的視頻直播延遲性能，是本領(lǐng)域亟待解決的技術(shù)問題。

發(fā)明內(nèi)容

有鑒于此，本申請(qǐng)的目的在于提供一種直播數(shù)據(jù)流交互方法、裝置、服務(wù)器及可讀存儲(chǔ)介質(zhì)，在保障觀看體驗(yàn)的同時(shí)極大降低傳輸數(shù)據(jù)量，并降低帶寬成本和直播延遲。

根據(jù)本申請(qǐng)的第一方面，提供一種直播數(shù)據(jù)流交互方法，應(yīng)用于直播數(shù)據(jù)流交互系統(tǒng)，所述直播數(shù)據(jù)流交互系統(tǒng)包括服務(wù)器以及與所述服務(wù)器通信連接的直播提供終端和直播觀看終端，所述方法包括：

所述直播提供終端對(duì)待交互的直播視頻流進(jìn)行特征殘缺化處理，獲得殘缺化視頻流，并將所述殘缺化視頻流發(fā)送給所述服務(wù)器，所述殘缺化視頻流與所述直播視頻流存在至少一個(gè)殘缺化維度的內(nèi)容損失；

所述服務(wù)器對(duì)所述殘缺化視頻流進(jìn)行完整內(nèi)容重繪，獲得所述殘缺化視頻流對(duì)應(yīng)的重繪視頻流，并將所述重繪視頻流進(jìn)行壓縮后將壓縮視頻流發(fā)送給所述直播觀看終端；

所述直播觀看終端對(duì)所述壓縮視頻流進(jìn)行轉(zhuǎn)換以將轉(zhuǎn)換視頻流進(jìn)行顯示。

在第一方面的一種可能的實(shí)施方式中，所述直播提供終端對(duì)待交互的直播視頻流進(jìn)行特征殘缺化處理，獲得殘缺化視頻流的步驟中，所述特征殘缺化處理包括以下方式中的一種或者多種組合：

對(duì)所述待交互的直播視頻流進(jìn)行尺寸裁剪；

對(duì)所述待交互的直播視頻流的色彩度進(jìn)行降低；

對(duì)所述待交互的直播視頻流中的部分視頻幀進(jìn)行剔除。

在第一方面的一種可能的實(shí)施方式中，所述服務(wù)器對(duì)所述殘缺化視頻流進(jìn)行完整內(nèi)容重繪，獲得所述殘缺化視頻流對(duì)應(yīng)的重繪視頻流的步驟，包括：

將所述殘缺化視頻流輸入到預(yù)先訓(xùn)練的完整內(nèi)容重繪模型中，基于所述完整內(nèi)容重繪模型預(yù)測(cè)所述殘缺化視頻流中的殘缺內(nèi)容信息；

基于預(yù)測(cè)的殘缺內(nèi)容信息對(duì)所述殘缺化視頻流進(jìn)行內(nèi)容重繪，獲得所述殘缺化視頻流對(duì)應(yīng)的重繪視頻流。

在第一方面的一種可能的實(shí)施方式中，所述方法還包括：

獲取針對(duì)每個(gè)目標(biāo)可直播活動(dòng)的原始訓(xùn)練圖像數(shù)據(jù)，其中，所述目標(biāo)可直播活動(dòng)具有規(guī)則化的圖像特征；

對(duì)所述原始訓(xùn)練圖像數(shù)據(jù)進(jìn)行特征殘缺化處理，獲得殘缺化訓(xùn)練圖像數(shù)據(jù)以及所述殘缺化訓(xùn)練圖像數(shù)據(jù)對(duì)應(yīng)的標(biāo)注殘缺部分?jǐn)?shù)據(jù)，所述殘缺化訓(xùn)練圖像數(shù)據(jù)與所述原始訓(xùn)練圖像數(shù)據(jù)存在至少一個(gè)殘缺化維度的內(nèi)容損失；

根據(jù)所述殘缺化訓(xùn)練圖像數(shù)據(jù)以及所述殘缺化訓(xùn)練圖像數(shù)據(jù)對(duì)應(yīng)的標(biāo)注殘缺部分?jǐn)?shù)據(jù)對(duì)初始內(nèi)容重繪模型進(jìn)行訓(xùn)練，獲得完整內(nèi)容重繪模型。