[發明專利]用于改進的視頻編碼的參考幀重投影

在審

• 申請號: 201810876368.2
• 申請日: 2018-08-03
• 公開（公告）號: CN109391815A
• 公開（公告）日: 2019-02-26
• 發明（設計）人: A·羅特;J·坦納;J·M·博伊斯
• 申請（專利權）人: 英特爾公司
• 主分類號: H04N19/124
• 分類號: H04N19/124;H04N19/13;H04N19/51;H04N19/593;H04N19/117;H04N19/61;H04N19/176;H04N19/597
• 代理公司: 北京尚誠知識產權代理有限公司 11322
• 代理人: 龍淳;岳磊

討論與視頻編碼有關的技術。這些視頻編碼技術包括：基于指示場景姿態變化的場景姿態差數據，將投影變換應用于重構參考幀；以及使用重投影后的重構參考幀作為運動補償參考幀來執行運動補償。

背景技術

現有的視頻編解碼器(例如，H.264或MPEG-4Part 10、高級視頻編碼(AVC)編解碼器、H.265高效視頻編碼(HEVC)編解碼器等)使用在分區大小可變的塊上執行的運動補償預測的原理進行操作。該運動估計和補償對于當前幀的塊可以使用基于塊的搜索，以在一個或多個參考幀中尋找最佳匹配塊。最佳匹配塊是使用參考幀的參考索引以及指示當前幀塊與參考幀中的最佳匹配塊之間的運動的運動矢量來引用的。在編碼器處經由運動估計找到的參考索引和運動矢量被編碼到比特流中并且被發送到解碼器。編碼器和解碼器二者在運動補償中使用參考索引和運動矢量，以(在解碼器側處)重構用于進一步用作參考幀并且用于最終呈現的幀。當被編碼的視頻內容是基于單個相機模型(其可以搖攝(pan)但具有最小旋轉、變焦、失真等)生成的時，這些技術可以是最高效的。然而，包括更高等級的旋轉、變焦放大或縮小、失真等的內容可能提供了難度。

因此，可能有利的是，增加編解碼器系統的壓縮效率、視頻質量和計算效率以便處理具有旋轉、變焦和其它影響的視頻內容。正是針對這些考慮和其它考慮，需要本改進。

附圖說明

在附圖中通過示例的方式而非通過限制的方式示出本文所描述的材料。為了說明的簡明性和清楚性，附圖所示的要素不一定按比例繪制。例如，為了清楚，一些要素的尺寸可以相對于其它要素被夸大。此外，在認為適當的情況下，在附圖之間重復了標號，以指示對應或類似要素。在附圖中：

圖1是用于使用重投影后的重構參考幀進行視頻編碼(coding)的示例上下文的說明性示圖；

圖2是用于使用重投影后的重構參考幀進行視頻編碼(encoding)的示例編碼器的說明性示圖；

圖3示出用于使用重投影后的重構參考幀進行視頻解碼的示例解碼器的框圖；

圖4是示出用于使用重投影后的重構參考幀對視頻進行編碼的示例處理的流程圖；

圖5是示出用于基于評估場景姿態差數據而有條件地應用幀重投影的示例處理的流程圖；

圖6示出視頻編碼中使用的多個重投影后的重構參考幀的示例；

圖7示出在變焦放大操作之后重投影后的重構參考幀的示例后處理；

圖8示出在變焦縮小操作之后重投影后的重構參考幀的示例后處理；

圖9示出僅應用于感興趣區域的示例投影變換；

圖10是示出用于使用重投影后的重構參考幀進行視頻編碼的示例處理的流程圖；

圖11是用于使用重投影后的重構參考幀進行視頻編碼的示例系統的說明性示圖；

圖12是示例系統的說明性示圖；以及

圖13示出均根據本公開的至少一些實現方式所布置的示例小形數(form factor)設備。

具體實施方式

現在參照附圖描述一個或多個實施例或實現方式。雖然討論了特定的配置和布置，但應理解，這僅是為了說明的目的而進行的。本領域技術人員將認識到，在不脫離說明書的精神和范圍的情況下，可以采用其它配置和布置。對于本領域技術人員顯而易見的是，也可以在除了本文所描述的之外的各種其它系統和應用中采用本文所描述的技術和/或布置。