[發(fā)明專利]全景視頻編碼方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201811606145.0
• 申請(qǐng)日: 2018-12-26
• 公開（公告）號(hào): CN109672897B
• 公開（公告）日: 2021-03-16
• 發(fā)明（設(shè)計(jì)）人: 包佳晶;胡義群;石小明
• 申請(qǐng)（專利權(quán)）人: 北京數(shù)碼視訊軟件技術(shù)發(fā)展有限公司
• 主分類號(hào): H04N21/218
• 分類號(hào): H04N21/218;H04N21/2343;H04N21/4402
• 代理公司: 北京超凡志成知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11371
• 代理人: 王文紅

本發(fā)明提供了一種全景視頻編碼方法及裝置，涉及全景視頻技術(shù)領(lǐng)域，解決全景視頻存儲(chǔ)空間大，視頻切換易出現(xiàn)卡頓或質(zhì)量急劇變化，用戶體驗(yàn)差的問題；包括如下步驟：采集全景視頻，將全景視頻分割成多個(gè)觀看角度；采用分層編碼方法將每個(gè)觀看角度數(shù)據(jù)單獨(dú)編碼，得到基礎(chǔ)層編碼數(shù)據(jù)和增強(qiáng)層編碼數(shù)據(jù)，并將每個(gè)觀看角度的編碼數(shù)據(jù)合并成全景視頻碼流進(jìn)行存儲(chǔ)；當(dāng)進(jìn)行視頻傳輸時(shí)，判斷當(dāng)前觀看角度是否為用戶觀看角度，如果是則傳輸基礎(chǔ)層編碼數(shù)據(jù)和增強(qiáng)層編碼數(shù)據(jù)，否則只傳輸基礎(chǔ)層編碼數(shù)據(jù)；對(duì)傳輸?shù)木幋a數(shù)據(jù)進(jìn)行解碼觀看。本發(fā)明能夠保證用戶能夠觀看具有高分辨率和高質(zhì)量的全景視頻，實(shí)現(xiàn)不同觀看角度無(wú)縫切換，確保編碼后的視頻占用存儲(chǔ)空間小。

技術(shù)領(lǐng)域

本發(fā)明涉及全景視頻技術(shù)領(lǐng)域，尤其是涉及一種全景視頻編碼方法及裝置。

背景技術(shù)

全景視頻在網(wǎng)絡(luò)上越來(lái)越多，應(yīng)用場(chǎng)景也越來(lái)越多，用戶體驗(yàn)越來(lái)越重要。全景需要提供給用戶多個(gè)角度看待同一個(gè)場(chǎng)景或者物體，進(jìn)而獲得全息用戶體驗(yàn)。常用的技術(shù)通常將多角度場(chǎng)景拆分為多個(gè)角度視頻，然后將多個(gè)角度的視頻拼接起來(lái)進(jìn)行編碼，碼流傳輸?shù)浇獯a端后解碼端按照需要還原成為全景視頻。但是，編碼壓縮后的視頻數(shù)據(jù)在進(jìn)行存儲(chǔ)時(shí)，由于每個(gè)角度數(shù)據(jù)都存儲(chǔ)高質(zhì)量的視頻數(shù)據(jù)，占用存儲(chǔ)空間大；而且，如果用戶在不同角度切換的時(shí)候出現(xiàn)卡頓或者質(zhì)量急劇變化，將導(dǎo)致用戶體驗(yàn)差。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明的目的在于提供一種全景視頻編碼方法及裝置，能夠保證用戶能夠觀看具有高分辨率和高質(zhì)量的全景視頻，實(shí)現(xiàn)不同觀看角度無(wú)縫切換，確保編碼后的視頻占用存儲(chǔ)空間小。

第一方面，本發(fā)明實(shí)施例提供了一種全景視頻編碼方法，包括如下步驟：

采集全景視頻，將所述全景視頻分割成多個(gè)觀看角度；

采用分層編碼方法將每個(gè)觀看角度的數(shù)據(jù)單獨(dú)編碼，得到基礎(chǔ)層編碼數(shù)據(jù)和增強(qiáng)層編碼數(shù)據(jù)，并將每個(gè)觀看角度的編碼數(shù)據(jù)合并成全景視頻碼流進(jìn)行存儲(chǔ)；

當(dāng)進(jìn)行視頻傳輸時(shí)，判斷當(dāng)前觀看角度是否為用戶觀看角度，如果是，則傳輸所述基礎(chǔ)層編碼數(shù)據(jù)和所述增強(qiáng)層編碼數(shù)據(jù)，否則只傳輸所述基礎(chǔ)層編碼數(shù)據(jù)；

對(duì)傳輸?shù)木幋a數(shù)據(jù)進(jìn)行解碼觀看。

結(jié)合第一方面，本發(fā)明實(shí)施例提供了第一方面的第一種可能的實(shí)施方式，其中，所述采用分層編碼方法將每個(gè)觀看角度的數(shù)據(jù)單獨(dú)編碼，得到基礎(chǔ)層編碼數(shù)據(jù)和增強(qiáng)層編碼數(shù)據(jù)，并將每個(gè)觀看角度的編碼數(shù)據(jù)合并成全景視頻碼流的步驟，包括：

為每個(gè)觀看角度的數(shù)據(jù)打上時(shí)間戳；

對(duì)每個(gè)觀看角度的數(shù)據(jù)進(jìn)行質(zhì)量分層和空間分層；

使用分層編碼技術(shù)對(duì)分層后的每個(gè)觀看角度的數(shù)據(jù)進(jìn)行單獨(dú)編碼；

按照時(shí)間戳將每個(gè)觀看角度的編碼數(shù)據(jù)合并成全景視頻碼流。

結(jié)合第一方面的第一種實(shí)施方式，本發(fā)明實(shí)施例提供了第一方面的第二種可能的實(shí)施方式，其中，所述空間分層包括高分辨率層和低分辨率層，所述質(zhì)量分層包括高質(zhì)量層和低質(zhì)量層；將所述低分辨率層和所述低質(zhì)量層作為所述基礎(chǔ)層，將所述高分辨率層和所述高質(zhì)量層作為所述增強(qiáng)層。

結(jié)合第一方面，本發(fā)明實(shí)施例提供了第一方面的第三種可能的實(shí)施方式，其中，當(dāng)進(jìn)行視頻傳輸時(shí)，判斷當(dāng)前觀看角度是否為用戶觀看角度，如果是，則傳輸所述基礎(chǔ)層編碼數(shù)據(jù)和所述增強(qiáng)層編碼數(shù)據(jù)，否則只傳輸所述基礎(chǔ)層編碼數(shù)據(jù)的步驟，包括重復(fù)執(zhí)行以下步驟，直至完成所有觀看角度的視頻碼流的傳輸：

獲取當(dāng)前觀看角度的視頻碼流；

根據(jù)所述當(dāng)前觀看角度的視頻碼流計(jì)算當(dāng)前觀看角度是否是用戶觀看角度；

如果是，則傳輸所述基礎(chǔ)層編碼數(shù)據(jù)和所述增強(qiáng)層編碼數(shù)據(jù)，否則只傳輸所述基礎(chǔ)層編碼數(shù)據(jù)；

判斷是否完成所有觀看角度的視頻碼流的傳輸。