[發(fā)明專(zhuān)利]視頻碼率確定方法、裝置、電子設(shè)備及其存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202111315458.2
• 申請(qǐng)日: 2021-11-08
• 公開(kāi)（公告）號(hào): CN114040230A
• 公開(kāi)（公告）日: 2022-02-11
• 發(fā)明（設(shè)計(jì)）人: 楊啖;周超
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京達(dá)佳互聯(lián)信息技術(shù)有限公司
• 主分類(lèi)號(hào): H04N21/2662
• 分類(lèi)號(hào): H04N21/2662;H04N21/24;G06N3/04;G06N3/08
• 代理公司: 北京銘碩知識(shí)產(chǎn)權(quán)代理有限公司 11286
• 代理人: 曾世驍;蘇銀虹

本公開(kāi)提供了一種視頻碼率確定方法、裝置、電子設(shè)備及其存儲(chǔ)介質(zhì)，所述視頻碼率確定方法包括：獲取關(guān)于視頻的視頻分片的信息，其中，視頻分片被轉(zhuǎn)碼為多個(gè)碼率檔位并且每個(gè)碼率檔位具有相應(yīng)的質(zhì)量分?jǐn)?shù)，關(guān)于視頻分片的信息包括該視頻分片在每個(gè)碼率檔位下的質(zhì)量分?jǐn)?shù)；在下載視頻分片的下載周期期間獲取網(wǎng)絡(luò)狀態(tài)信息和播放器信息，并將獲取的網(wǎng)絡(luò)狀態(tài)信息、播放器信息和關(guān)于視頻分片的信息輸入視頻碼率確定模型以獲得針對(duì)待下載視頻分片選擇的碼率檔位；請(qǐng)求下載與選擇的待下載視頻分片的碼率檔位相應(yīng)的視頻分片。根據(jù)本公開(kāi)的方法和裝置能夠基于視頻質(zhì)量感知信息來(lái)自適應(yīng)切換視頻碼率，從而提供更為流暢的視頻觀看體驗(yàn)。

技術(shù)領(lǐng)域

本公開(kāi)涉及互聯(lián)網(wǎng)技術(shù)領(lǐng)域，尤其涉及一種確定要下載的視頻的碼率的方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

近年來(lái)，隨著移動(dòng)互聯(lián)網(wǎng)和4G、5G技術(shù)的進(jìn)一步發(fā)展，流媒體業(yè)務(wù)日益流行。在多媒體產(chǎn)業(yè)界，都出現(xiàn)了一系列的成熟的點(diǎn)播(VOD，Video On Demand)平臺(tái)公司。因此面對(duì)極速增長(zhǎng)的點(diǎn)播業(yè)務(wù)，關(guān)于研究如何提升VOD用戶(hù)的用戶(hù)觀看體驗(yàn)有著重要意義。

在VOD業(yè)務(wù)中，通常會(huì)利用多碼率技術(shù)來(lái)保障用戶(hù)享受高清晰、低卡頓的觀看質(zhì)量。多碼率技術(shù)是指為用戶(hù)提供不同分辨率檔位(諸如超清、高清、標(biāo)清、流暢等檔位)，用戶(hù)可以根據(jù)自身網(wǎng)絡(luò)環(huán)境優(yōu)劣選擇適配的清晰度。由于用戶(hù)的選擇清晰度需要一定的交互，因此VOD服務(wù)提供商都會(huì)選擇開(kāi)發(fā)自動(dòng)算法來(lái)為用戶(hù)自動(dòng)適配所適合的清晰度，這種機(jī)制被稱(chēng)為多碼率自適應(yīng)算法(ABR，Adaptive Bitrate)。因此研究ABR算法，對(duì)用戶(hù)的體驗(yàn)有著重要意義。

然而，相關(guān)技術(shù)的ABR方法在網(wǎng)絡(luò)劇烈抖動(dòng)后通常會(huì)導(dǎo)致用戶(hù)觀看卡頓，并且碼率檔位切換頻繁，缺乏對(duì)視頻質(zhì)量的理解，并且無(wú)法解決帶寬無(wú)法預(yù)測(cè)的問(wèn)題。

發(fā)明內(nèi)容

本公開(kāi)提供一種確定視頻碼率和訓(xùn)練視頻碼率確定模型的方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，以至少解決相關(guān)技術(shù)中的自適應(yīng)切換視頻碼率存在的問(wèn)題，也可不解決任何上述問(wèn)題。

根據(jù)本公開(kāi)的第一方面，提供了一種用于視頻碼率確定模型的訓(xùn)練方法，包括：獲取關(guān)于訓(xùn)練樣本視頻所包括的視頻分片的信息，其中，訓(xùn)練樣本視頻的視頻分片被轉(zhuǎn)碼為多個(gè)碼率檔位并且每個(gè)碼率檔位具有相應(yīng)的質(zhì)量分?jǐn)?shù)，關(guān)于視頻分片的信息包括該視頻分片在每個(gè)碼率檔位下的質(zhì)量分?jǐn)?shù)；在通過(guò)預(yù)先構(gòu)建的播放環(huán)境下載視頻分片的下載周期期間獲取網(wǎng)絡(luò)狀態(tài)信息和播放器信息，并將獲取的網(wǎng)絡(luò)狀態(tài)信息、播放器信息和關(guān)于視頻分片的信息輸入視頻碼率確定模型以獲得針對(duì)待下載視頻分片選擇的碼率檔位；基于與針對(duì)每個(gè)視頻分片選擇的碼率檔位相應(yīng)的質(zhì)量分?jǐn)?shù)、播放卡頓情況和碼率檔位切換次數(shù)構(gòu)建獎(jiǎng)勵(lì)函數(shù)，并使用獎(jiǎng)勵(lì)函數(shù)來(lái)調(diào)整視頻碼率確定模型的參數(shù)。

根據(jù)本公開(kāi)的第一方面，視頻分片的質(zhì)量分?jǐn)?shù)由所述視頻分片的視頻編碼客觀指標(biāo)和/或用戶(hù)的主觀感受評(píng)價(jià)確定，其中，視頻編碼客觀指標(biāo)包括以下指標(biāo)中的至少一個(gè)：峰值信號(hào)噪聲比PSNR、結(jié)構(gòu)相似度指標(biāo)SSIM或視頻多方法評(píng)估融合VMAF。

根據(jù)本公開(kāi)的第一方面，所述預(yù)先構(gòu)建的播放環(huán)境包括客戶(hù)端播放器、客戶(hù)端緩沖器和內(nèi)容分發(fā)服務(wù)器，其中，所述客戶(hù)端播放器從內(nèi)容分發(fā)服務(wù)器下載視頻分片并將下載的視頻分片存儲(chǔ)到客戶(hù)端緩沖器中，所述客戶(hù)端播放器、客戶(hù)端緩沖器和內(nèi)容分發(fā)服務(wù)器之間具有用于傳遞視頻分片的質(zhì)量分?jǐn)?shù)的接口。

根據(jù)本公開(kāi)的第一方面，所述訓(xùn)練樣本視頻是從包括點(diǎn)播視頻和短視頻的視頻數(shù)據(jù)集獲取的。

根據(jù)本公開(kāi)的第一方面，所述視頻碼率確定模型具有包括基于值的深度神經(jīng)網(wǎng)絡(luò)和基于策略的深度神經(jīng)網(wǎng)絡(luò)的深度強(qiáng)化學(xué)習(xí)結(jié)構(gòu)，其中，基于策略的深度神經(jīng)網(wǎng)絡(luò)被配置為輸出針對(duì)視頻分片的碼率檔位選擇，基于值的深度神經(jīng)網(wǎng)絡(luò)被配置為針對(duì)基于策略的深度神經(jīng)網(wǎng)絡(luò)的碼率檔位選擇動(dòng)作進(jìn)行評(píng)分。

根據(jù)本公開(kāi)的第一方面，基于策略的深度神經(jīng)網(wǎng)絡(luò)具有全連接的一維卷積層，并且采用Softmax函數(shù)作為激活函數(shù)，其中，所述基于策略的深度神經(jīng)網(wǎng)絡(luò)輸出與所述多個(gè)碼率檔位相應(yīng)的選擇的概率。