[發(fā)明專利]可適應(yīng)解碼幀緩存器尺寸的圖塊布局重建方法及相關(guān)視頻解碼裝置

在審

• 申請?zhí)枺?/td>: 201810960791.0
• 申請日: 2018-08-22
• 公開（公告）號: CN110858907A
• 公開（公告）日: 2020-03-03
• 發(fā)明（設(shè)計(jì)）人: 王頌文
• 申請（專利權(quán)）人: 晨星半導(dǎo)體股份有限公司
• 主分類號: H04N19/44
• 分類號: H04N19/44;H04N19/184;H04N19/176;H04N19/167;H04N19/70;H04N19/42
• 代理公司: 北京三友知識產(chǎn)權(quán)代理有限公司 11127
• 代理人: 湯在彥

一種圖塊布局重建方法，用于一視頻比特流解碼裝置。該方法包含根據(jù)一地理位置，判斷一輸入比特流的一原始圖像的一興趣區(qū)，以擷取該興趣區(qū)的興趣圖塊數(shù)據(jù)；根據(jù)該興趣圖塊數(shù)據(jù)，重建該輸入比特流的一圖塊布局；以及當(dāng)判斷該輸入比特流的多個(gè)圖塊中的一當(dāng)前圖塊屬于該興趣區(qū)時(shí)，根據(jù)該圖塊布局，調(diào)整該當(dāng)前圖塊的解碼幀緩存地址。

技術(shù)領(lǐng)域

本發(fā)明是指一種圖塊布局重建方法及相關(guān)視頻解碼裝置，尤指一種可適應(yīng)解碼幀緩存器尺寸的圖塊布局重建方法及相關(guān)視頻解碼裝置。

背景技術(shù)

在全景虛擬現(xiàn)實(shí)(360-Degree Virtual Reality，簡稱VR360)應(yīng)用中，當(dāng)使用世界地圖模式時(shí)，視頻解碼裝置(例如，虛擬現(xiàn)實(shí)裝置)會依照用戶選取的地理位置(例如，經(jīng)度、緯度及對應(yīng)視角)來決定其屏幕的顯示內(nèi)容。一般而言，虛擬現(xiàn)實(shí)裝置可透過網(wǎng)絡(luò)從世界地圖數(shù)據(jù)庫下載圖像檔案(例如，視頻比特流(Video bit-stream))，將圖像檔案暫存于內(nèi)建存儲器(例如，幀緩存器(frame buffer))中，再對圖像檔案進(jìn)行解碼來取得欲顯示的圖像，以將之顯示于屏幕。

圖1繪示根據(jù)一地理位置L1，從一世界地圖E_MAP載入一視野區(qū)FOV1的示意圖。圖2繪示根據(jù)一地理位置L2，從世界地圖E_MAP載入一視野區(qū)FOV2的示意圖。如第1、2圖所示，世界地圖E_MAP可依據(jù)多個(gè)經(jīng)度及多個(gè)緯度而分割為多個(gè)圖塊(tile)編號0～509(例如，30經(jīng)度*17緯度＝510圖塊)。由于世界地圖E_MAP是由球體表面轉(zhuǎn)換而來的平面地圖，因此需顯示的分區(qū)圖像大小或形狀會隨著不同的經(jīng)緯度而有所不同。

舉例來說，于圖1中，當(dāng)?shù)乩砦恢肔1落在緯度0度(赤道)時(shí)，視野區(qū)(Field ofView)FOV1包含圖塊編號98～111、128～141、158～171、188～201、218～231、248～261、278～291、308～321、338～351、368～381、398～411，共154個(gè)圖塊；其中屏幕的顯示內(nèi)容為一興趣區(qū)(Region of Interest)ROI1，興趣區(qū)ROI1包含圖塊編號132～137、160～169、189～200、219～230、249～260、279～290、309～320、340～349、372～307，共80個(gè)圖塊。

于圖2中，當(dāng)?shù)乩砦恢肔2落在緯度56度時(shí)，視野區(qū)FOV2包含圖塊編號0～29、30～59、60～171、90～201、120～231、150～261、180～291、210～321、240～351、270～381，共300個(gè)圖塊；其中屏幕的顯示內(nèi)容為一興趣區(qū)ROI2，興趣區(qū)ROI2包含圖塊編號0～29、36～53、67～82、97～112、127～142、157～172、188～201、219～230、250～252、257～259，共144個(gè)圖塊。

比較第1、2圖可發(fā)現(xiàn)視野區(qū)FOV1及FOV2的長度與寬度皆不同，因此在進(jìn)行分區(qū)圖像解碼時(shí)需要的存儲器尺寸(例如，幀緩存器的尺寸)也不同。

目前全景虛擬現(xiàn)實(shí)技術(shù)采用高效率視頻編解碼(High Efficiency VideoCoding，簡稱HEVC)標(biāo)準(zhǔn)來進(jìn)行圖像編碼及解碼，然而現(xiàn)有硬件設(shè)計(jì)可支持的最大像素寬度為4096以及最大像素高度為2560。由于視野區(qū)FOV2的像素寬度7860超過最大像素寬度4096，造成現(xiàn)有HEVC的硬件設(shè)計(jì)無法支持視野區(qū)FOV2的圖像解碼工作，導(dǎo)致虛擬現(xiàn)實(shí)裝置無法正常顯示。

此外，HEVC標(biāo)準(zhǔn)定義了標(biāo)注運(yùn)動約束圖塊集合(motion-constrained tile set，簡稱MCTS)，允許運(yùn)動約束圖塊集合里的圖塊可獨(dú)立解碼而不需參考其他數(shù)據(jù)。然而，申請人注意到在進(jìn)行MCTS解碼時(shí)，若用戶將視角從地理位置L1移動到地理位置L2，現(xiàn)有視頻解碼裝置卻未同步變更需解碼的目標(biāo)圖塊(因?yàn)镸CTS里的圖塊可獨(dú)立解碼而不需參考其他數(shù)據(jù))，使得視頻解碼裝置把興趣區(qū)ROI1的解碼圖像映射到興趣區(qū)ROI2的顯示位置，導(dǎo)致虛擬現(xiàn)實(shí)裝置顯示錯誤圖像。