[發(fā)明專(zhuān)利]參考圖像管理方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201310646235.3
• 申請(qǐng)日: 2013-12-04
• 公開(kāi)（公告）號(hào): CN103873872B
• 公開(kāi)（公告）日: 2017-07-07
• 發(fā)明（設(shè)計(jì)）人: 張凱;安基程;余琴;馬思偉
• 申請(qǐng)（專(zhuān)利權(quán)）人: 聯(lián)發(fā)科技(新加坡)私人有限公司
• 主分類(lèi)號(hào): H04N19/51
• 分類(lèi)號(hào): H04N19/51
• 代理公司: 北京三友知識(shí)產(chǎn)權(quán)代理有限公司11127
• 代理人: 任默聞

技術(shù)領(lǐng)域

本發(fā)明有關(guān)于一種參考圖像管理方法。更具體地，本發(fā)明有關(guān)于一種參考圖像管理方法及裝置。

背景技術(shù)

運(yùn)動(dòng)估測(cè)是一種有效的幀間編碼技術(shù)，用于在視頻序列中使用時(shí)間冗余（temporal redundancy）。運(yùn)動(dòng)補(bǔ)償幀間編碼技術(shù)已廣泛運(yùn)用于各種國(guó)際視頻編碼標(biāo)準(zhǔn)。對(duì)包括幀間或圖像間編碼的視頻編碼系統(tǒng)而言，當(dāng)前圖像的處理可使用先前已編碼圖像(或條帶（slice）或區(qū)域（region）)的信息。這些先前已編碼圖像在用于進(jìn)行預(yù)測(cè)之前被譯碼且將已譯碼圖像稱(chēng)為”參考圖像”。在較新的視頻編碼標(biāo)準(zhǔn)中，例如高階視頻編碼(Advanced Video Coding，AVC)(也稱(chēng)為H.264)以及高效率視頻編碼(HEVC)等，通過(guò)使用非常詳盡的參考圖像可很好地利用圖像間冗余。而參考圖像必須存儲(chǔ)在編碼器端和譯碼器端的參考圖像緩存中。由于使用的參考圖像的數(shù)目可能相當(dāng)大，因此編碼系統(tǒng)如何有效地管理參考圖像已成為關(guān)鍵問(wèn)題。

在HEVC標(biāo)準(zhǔn)中(Bross et al,“High Efficiency Video Coding(HEVC)text Specification Draft 9”,Joint Collaborative Team on Video Coding(JCT-VC)of ITU-T SG 16 WP3 and ISO/IEC JTC1/SC29/WG11,JCTVC-K1003_v10,Oct.2012)，揭露了靈活的參考圖像管理。編碼器可選擇參考參數(shù)(reference parameter)來(lái)編碼每個(gè)圖像。參考參數(shù)可包括用于構(gòu)建(construct)參考列表(reference list)的參考圖像的數(shù)目、參考列表中參考圖像的順序以及參考圖像使用率。參考圖像信息傳輸在視頻比特流中，以使譯碼器可在譯碼器端恢復(fù)對(duì)應(yīng)的參考圖像。為了實(shí)現(xiàn)這些功能，將根據(jù)HEVC標(biāo)準(zhǔn)的參考圖像管理設(shè)計(jì)描述如下。

每個(gè)圖像指定一個(gè)圖像順序計(jì)數(shù)(Picture Order Count，POC)，并且POC傳輸在條帶標(biāo)頭中，從編碼器端傳輸至譯碼器。POC表示圖像的輸出順序(即顯示順序)。對(duì)于一個(gè)條帶，使用參考圖像集合(Reference Picture Set，RPS)來(lái)定義當(dāng)前條帶所使用的參考圖像。在RPS中，參考圖像可透過(guò)當(dāng)前圖像與參考圖像的POC之間的差來(lái)進(jìn)行定位（locate）。圖1為根據(jù)HEVC的基于POC的短程（short-term）RPS語(yǔ)法的示意圖。由于輸出順序可能會(huì)與編碼順序不同，參考圖像的POC可小于或大于當(dāng)前圖像的POC。存在兩種方式（即直接模式與預(yù)測(cè)模式）來(lái)根據(jù)HEVC編碼POC，以標(biāo)志inter_ref_pic_set_prediction_flag表示該兩種方式。當(dāng)前述標(biāo)志等于0時(shí)，當(dāng)前圖像的參考圖像集合是以直接模式表示。當(dāng)前述標(biāo)志等于1時(shí)，當(dāng)前圖像的參考圖像集合是以預(yù)測(cè)模式表示。在直接模式中，參考圖像的POC是分別編碼為對(duì)應(yīng)低于當(dāng)前圖像的POC的設(shè)置s0以及對(duì)應(yīng)高于當(dāng)前圖像的POC的設(shè)置s1。這些參考圖像可在標(biāo)志used_by_curr_pic_sx_flag等于1時(shí)被當(dāng)前圖像使用，或者可在used_by_curr_pic_sx_flag等于0時(shí)被后續(xù)圖像使用而不被當(dāng)前圖像使用。在預(yù)測(cè)模式中，參考圖像的POC是可透過(guò)標(biāo)志delta_idx_minus1所表示的一個(gè)先前已編碼RPS來(lái)進(jìn)行預(yù)測(cè)。

圖2為根據(jù)HEVC所定義的包括在序列參數(shù)集合（Sequecne Parameter Set，SPS）中的RPS語(yǔ)法表的示意圖。如圖2所示，多個(gè)參考圖像集合可傳輸在SPS中，以num_short_term_ref_pic_sets表示。一個(gè)條帶可選擇傳輸在SPS中的RPS中，如short_term_ref_pic_set_idx所表示，或者條帶可使用新的RPS傳輸在條帶標(biāo)頭中。條帶標(biāo)頭中的對(duì)應(yīng)語(yǔ)法結(jié)構(gòu)顯示在圖3中。圖3為根據(jù)HEVC所定義的包括在條帶標(biāo)頭中的RPS語(yǔ)法表的示意圖。

對(duì)于已譯碼圖像緩存(Decoded Picture Buffer，DPB)中的一個(gè)已譯碼圖像，如果此圖像未包括在當(dāng)前圖像的RPS中時(shí)，此圖像將不再是參考圖像且可在輸出后從DPB中移除。