[發明專利]用于對圖像或視頻數據的當前塊進行編碼的方法

有效

• 申請號: 202010940205.3
• 申請日: 2020-09-09
• 公開（公告）號: CN112040230B
• 公開（公告）日: 2023-01-03
• 發明（設計）人: 帕斯卡·馬西米諾;文森特·拉博
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: H04N19/124
• 分類號: H04N19/124;H04N19/122;H04N19/119;H04N19/176;H04N19/18
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 周亞榮;鄧聰惠

本公開涉及使用非零系數邊界的稀疏矩陣表示。用于編碼或解碼的圖像或視頻數據的稀疏矩陣表示使用了在所述圖像或視頻數據內的非零系數的邊界。邊界框將在圖像或視頻塊內的每個非零系數包圍起來。所述包圍在邊界框內的系數與尺寸信息一起被編碼到比特流，該尺寸信息可用于在解碼期間識別在所述圖像或視頻塊內的邊界框。未包圍在所述邊界框中的系數未在所述比特流中被特定編碼。所述尺寸信息表示在所述邊界框的圖像或視頻塊內的形狀、大小或位置中的一個或多個。所述邊界框可以根據用于處理在所述圖像或視頻塊內的系數的掃描順序來識別。所述邊界框可以是矩形或非矩形的。

技術領域

本公開涉及使用非零系數邊界的稀疏矩陣表示。

背景技術

圖像內容代表了大量的在線內容。網頁可以包括多個圖像，并且用于渲染網頁所花費的時間和資源中的大部分專用于渲染那些圖像以供顯示。接收和渲染圖像以進行顯示所需的時間和資源的量部分地取決于該圖像的編碼方式。這樣，可以通過減小圖像的總數據大小來更快地渲染所述圖像以及因此包括該圖像的網頁。已經提出了各種方案來減少圖像的總數據大小，包括編碼或解碼技術。

數字視頻流可以使用一系列幀或靜止圖像來表示視頻。數字視頻可用于各種應用，包括例如視頻會議、高清視頻娛樂、視頻廣告或用戶生成視頻的共享。數字視頻流可以包含大量數據，并且消耗計算裝置的大量計算或通信資源以用于處理、傳輸或存儲視頻數據。已經提出了各種方案來減少視頻流中的數據量，包括編碼或解碼技術。

發明內容

本文特別公開了用于使用稀疏矩陣表示的圖像或視頻編碼的系統和技術，所述稀疏矩陣表示使用了非零系數的邊界。

根據本公開的實施方式的用于對編碼圖像塊的方法包括：變換所述圖像塊的數據以產生變換圖像數據；量化變換圖像數據以產生量化圖像數據，其中，所述量化圖像數據包括布置在二維矩陣中的系數；識別包圍在所述二維矩陣內的所述量化圖像數據的非零值系數的邊界框，其中，所述量化圖像數據的零值系數位于在所述二維矩陣內的所述邊界框的外部；將包圍在所述邊界框內的非零值系數熵編碼成編碼比特流；以及在編碼比特流中包括所述邊界框的尺寸信息。

根據本公開的實施方式的用于對編碼圖像塊進行解碼的方法包括：從包括所述編碼圖像塊的編碼比特流中解碼邊界框的尺寸信息；使用所述尺寸信息從編碼比特流解碼代表所述編碼圖像塊的語法元素，其中，所述語法元素對應于在所述圖像數據的編碼期間包圍在所述邊界框內的圖像數據的非零值系數，其中，所述語法元素是以二維矩陣格式之外的格式布置的；對所述語法元素進行反量化以產生變換圖像數據，其中，所述變換圖像數據包括布置在二維矩陣中的系數；對所述變換圖像數據進行逆變換以產生解碼圖像數據；以及輸出所述解碼圖像數據以進行存儲或顯示。

根據本公開的實施方式的用于編碼視頻塊進行的方法包括：為所述視頻塊的數據生成預測塊；使用所述預測塊為所述視頻塊的數據產生預測殘差；變換所述預測殘差以產生變換系數；量化所述變換系數以產生量化變換系數，其中，所述量化變換系數被布置在二維矩陣中；識別包圍在所述二維矩陣內的所述量化變換系數的非零值系數的邊界框，其中，所述量化變換系數的零值系數位于在所述二維矩陣內的所述邊界框的外部；將包圍在所述邊界框內的所述非零值系數熵編碼成編碼比特流；以及在所述編碼比特流中包括所述邊界框的尺寸信息。

根據本公開的實施方式的用于對編碼視頻塊進行解碼的方法包括：從包括所述編碼圖像塊的編碼比特流中解碼邊界框的尺寸信息；使用所述尺寸信息從編碼比特流解碼代表所述編碼視頻塊的語法元素，其中，所述語法元素對應于在視頻數據的編碼期間包圍在所述邊界框內的所述視頻數據的非零值系數，其中，所述語法元素是以二維矩陣格式之外的格式布置的；對所述語法元素進行反量化以產生變換系數，其中，所述變換系數包括布置在二維矩陣中的系數；對所述變換系數進行逆變換以產生預測殘差；重構所述預測殘差以產生解碼視頻塊；以及，輸出所述解碼視頻塊以進行存儲或顯示。

附圖說明