[發(fā)明專利]全景視頻的碼率分配方法、裝置、移動終端及存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 202011337673.8
• 申請日: 2020-11-25
• 公開（公告）號: CN112468828B
• 公開（公告）日: 2022-06-17
• 發(fā)明（設(shè)計）人: 張磊;索琰琰;伍曦明;崔來中
• 申請（專利權(quán)）人: 深圳大學(xué)
• 主分類號: H04N21/218
• 分類號: H04N21/218;H04N21/2343;H04N21/442
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 潘登

1.一種全景視頻的碼率分配方法，其特征在于，包括：

實時采集歷史用戶視區(qū)預(yù)測誤差度數(shù)；

根據(jù)所述歷史用戶視區(qū)預(yù)測誤差度數(shù)確定最佳圖塊切分方式；

根據(jù)所述最佳圖塊切分方式確定當(dāng)前預(yù)測用戶視區(qū)內(nèi)的目標(biāo)圖塊以及所述目標(biāo)圖塊的權(quán)重；

將所述目標(biāo)圖塊的權(quán)重代入預(yù)設(shè)最大化體驗質(zhì)量模型，并根據(jù)所述預(yù)設(shè)最大化體驗質(zhì)量模型確定需要下載的目標(biāo)視頻片段以及所述目標(biāo)視頻片段的碼率；

在所述將所述目標(biāo)圖塊的權(quán)重代入預(yù)設(shè)最大化體驗質(zhì)量模型，并根據(jù)所述預(yù)設(shè)最大化體驗質(zhì)量模型確定需要下載的目標(biāo)視頻片段以及所述目標(biāo)視頻片段的碼率之前，還包括：

確定全景視頻中每個視頻片段的質(zhì)量等級、每兩個連續(xù)視頻片段之間的質(zhì)量波動以及下載每個視頻片段所需的卡頓時間；

根據(jù)所述質(zhì)量等級、所述質(zhì)量波動以及所述卡頓時間建立所述預(yù)設(shè)最大化體驗質(zhì)量模型；

所述確定全景視頻中每個視頻片段的質(zhì)量等級，包括：

其中，表示所述質(zhì)量等級，w_i,j表示全景視頻的第i個視頻片段中第j個圖塊的權(quán)重，q(b_i,j)表示第i個視頻片段中第j個圖塊與用戶體驗質(zhì)量之間的非遞減映射函數(shù)，b_i，j表示第i個視頻片段中第j個圖塊的碼率，n表示第i個視頻片段中圖塊的總數(shù)；

所述確定全景視頻中每兩個連續(xù)視頻片段之間的質(zhì)量波動，包括：

其中，表示所述質(zhì)量波動；

所述確定全景視頻中下載每個視頻片段所需的卡頓時間，包括：

其中，表示所述卡頓時間，C_i表示下載第i個視頻片段時的預(yù)測帶寬吞吐量，B_i表示開始下載第i個視頻片段時的緩沖區(qū)大小，t_miss表示重新下載之前的未下載圖塊所占用的時間；

所述根據(jù)所述質(zhì)量等級、所述質(zhì)量波動以及所述卡頓時間建立所述預(yù)設(shè)最大化體驗質(zhì)量模型，包括：

其中，Q_i表示體驗質(zhì)量，p、q和r表示權(quán)重系數(shù)。

2.根據(jù)權(quán)利要求1所述的全景視頻的碼率分配方法，其特征在于，在所述將所述目標(biāo)圖塊的權(quán)重代入預(yù)設(shè)最大化體驗質(zhì)量模型，并根據(jù)所述預(yù)設(shè)最大化體驗質(zhì)量模型確定需要下載的目標(biāo)視頻片段以及所述目標(biāo)視頻片段的碼率之前，還包括：

根據(jù)移動終端的當(dāng)前可用硬件資源以及所述最佳圖塊切分方式確定支持實時解碼的最大視頻碼率；

根據(jù)移動終端的當(dāng)前帶寬以及當(dāng)前緩沖區(qū)占用情況確定可下載的總視頻碼率；

相應(yīng)的，所述將所述目標(biāo)圖塊的權(quán)重代入預(yù)設(shè)最大化體驗質(zhì)量模型，并根據(jù)所述預(yù)設(shè)最大化體驗質(zhì)量模型確定需要下載的目標(biāo)視頻片段以及所述目標(biāo)視頻片段的碼率，包括：

根據(jù)所述預(yù)設(shè)最大化體驗質(zhì)量模型、所述最大視頻碼率以及所述總視頻碼率確定所述目標(biāo)視頻片段以及所述目標(biāo)視頻片段的碼率。

3.根據(jù)權(quán)利要求2所述的全景視頻的碼率分配方法，其特征在于，在所述根據(jù)移動終端的當(dāng)前可用硬件資源以及所述最佳圖塊切分方式確定支持實時解碼的最大視頻碼率之前，還包括：

對于對應(yīng)多種預(yù)設(shè)碼率以及多種預(yù)設(shè)圖塊切分方式的全景視頻，采用并行異步解碼方式分別確定各個全景視頻所需的解碼時間；

確定所述解碼時間與圖塊數(shù)量、視頻碼率以及解碼線程數(shù)之間的影響關(guān)系；

相應(yīng)的，所述根據(jù)移動終端的當(dāng)前可用硬件資源以及所述最佳圖塊切分方式確定支持實時解碼的最大視頻碼率，包括：

根據(jù)所述當(dāng)前可用硬件資源確定移動終端當(dāng)前支持的最大解碼線程數(shù)；

根據(jù)所述最大解碼線程數(shù)、所述最佳圖塊切分方式以及所述影響關(guān)系確定所述最大視頻碼率。