[發(fā)明專利]用于簡化視頻隨機訪問的約束和單元類型的方法

有效

• 申請?zhí)枺?/td>: 201380031429.0
• 申請日: 2013-04-16
• 公開（公告）號: CN104350750B
• 公開（公告）日: 2018-10-23
• 發(fā)明（設(shè)計）人: G.J.薩利文;S.卡努穆里
• 申請（專利權(quán)）人: 微軟技術(shù)許可有限責(zé)任公司
• 主分類號: H04N19/65
• 分類號: H04N19/65;H04N19/70
• 代理公司: 北京市金杜律師事務(wù)所 11256
• 代理人: 王茂華

本文所公開的是對于具有完全隨機訪問（CRA）圖片和/或其它類型的隨機訪問點（RAP）圖片的比特流的創(chuàng)新。對于RAP圖片類型的新的類型定義和策略約束可以簡化基本視頻流數(shù)據(jù)的單元到容器格式的映射。這樣的創(chuàng)新可有助于改進(jìn)視頻編碼系統(tǒng)的能力，以便更靈活地執(zhí)行自適應(yīng)視頻遞送、制作編輯、商業(yè)插入等等。

背景技術(shù)

本申請涉及視頻編碼和解碼，并且特別地涉及與隨機訪問點圖片（picture）有關(guān)的改進(jìn)。

工程師使用壓縮（也稱為源編碼）來減小數(shù)字視頻的比特率。壓縮通過將信息轉(zhuǎn)換成較低比特率形式來降低存儲和傳輸視頻信息的成本。解壓縮（也稱為解碼）從壓縮形式重建原始信息版本?！熬幗獯a器”是編碼器/解碼器系統(tǒng)。

在過去的二十年里，已經(jīng)采用各種視頻編解碼器標(biāo)準(zhǔn)，包括H.261、H.262（MPEG-2或者ISO/IEC 13818-2）、H.263和H.264（AVC或者ISO/IEC 14496-10）標(biāo)準(zhǔn)和MPEG-1（ISO/IEC 11172-2）、MPEG-4視覺（ISO/IEC 14496-2）和SMPTE 421M標(biāo)準(zhǔn)。最近，HEVC標(biāo)準(zhǔn)正處于開發(fā)中。視頻編解碼器標(biāo)準(zhǔn)典型地定義了用于編碼的視頻比特流的語法的選項，當(dāng)在編碼和解碼中使用特定特征時在該比特流中詳述參數(shù)。在許多情況下，視頻編解碼器標(biāo)準(zhǔn)也提供關(guān)于解碼器應(yīng)該執(zhí)行的解碼操作的細(xì)節(jié)，以在解碼中達(dá)到正確的結(jié)果。

在廣播和流播應(yīng)用中，讓解碼器隨機訪問已編碼比特流中的點并對來自隨機訪問點的圖片進(jìn)行解碼的能力是令人想要的特性。例如當(dāng)觀看者在廣播或者流之間切換時、或者當(dāng)執(zhí)行比特流拼接（splice）時，發(fā)生這樣的隨機訪問。

發(fā)明內(nèi)容

概括而言，詳細(xì)說明介紹了對于具有完全隨機訪問（CRA，clean random access）圖片和/或其它類型隨機訪問點（RAP）圖片的比特流的創(chuàng)新。對于RAP圖片的類型的新類型定義和策略約束可以簡化基本視頻流數(shù)據(jù)的單元到容器格式的映射。這樣的創(chuàng)新可有助于改進(jìn)視頻編碼系統(tǒng)的能力，以便更靈活地執(zhí)行自適應(yīng)視頻遞送、制作編輯、商業(yè)插入等等。

本文描述的創(chuàng)新包括，但不受限于，允許處在比特流中間而不僅僅是在比特流開始處的CRA圖片具有一個或者多個潛在地不可解碼的圖片，其在比特流中在CRA圖片后出現(xiàn)。在一些使用中，這些潛在地不可解碼的圖片在以下的意義上是相關(guān)于CRA圖片的前導(dǎo)圖片（leading picture），即：雖然在比特流中它們是在CRA圖片之后出現(xiàn)，但是它們具有先于CRA圖片的顯示輸出順序的被識別的顯示輸出順序。換言之，除了允許在比特流開始處的CRA圖片具有不可解碼的前導(dǎo)圖片之外，也允許比特流具有這樣的CRA圖片，即：其不在比特流開始處，且其具有在比特流中跟隨在它之后的潛在不可解碼的圖片。關(guān)于這一點，前導(dǎo)圖片是按比特流順序（也稱為編碼順序、解碼順序等等）跟隨在某個CRA圖片之后、但按顯示順序（也稱為輸出順序）先于該CRA圖片的圖片。允許在作為比特流開始部分的CRA圖片后面（按比特流順序）跟隨由于缺失之前的參考圖片而不能被解碼的前導(dǎo)圖片。現(xiàn)在，也允許在比特流中在落入比特流中間的CRA圖片后面跟隨這樣的不可解碼的圖片。按照本公開技術(shù)的實施例，已經(jīng)移除了針對在比特流中部CRA圖片之后不可解碼前導(dǎo)圖片的存在的約束。

在某些示例性實現(xiàn)中，添加標(biāo)記或者其它指示符（例如，作為條帶（slice）頭中的圖片級的信息等等），其指示這樣的對于CRA圖片的不可解碼前導(dǎo)圖片的潛在存在。指示符可以被使用來（例如通過解碼器）確定如何處理前導(dǎo)圖片（例如，解碼器是否應(yīng)該對前導(dǎo)圖片進(jìn)行解碼）。例如，當(dāng)使用本文描述的斷鏈（broken link）功能性時，不同的網(wǎng)絡(luò)抽象層（NAL）單元類型被用來指示前導(dǎo)圖片是否存在以及存在什么類型的前導(dǎo)圖片。進(jìn)一步地，這些NAL單元類型不同于用于CRA的常規(guī)NAL單元類型。同樣，在某些示例性實現(xiàn)中，添加標(biāo)記或者其它指示符（例如，作為在圖片級用于潛在不可解碼的圖片的語法元素、作為對于潛在不可解碼的圖片而用信號告知的NAL單元類型等等）以明確地標(biāo)識潛在不可解碼的圖片，而不是使用圖片分成前導(dǎo)圖片的分類作為識別潛在不可解碼的圖片的規(guī)則。