[發明專利]自適應DCT銳化器

在審

• 申請號: 201980068474.0
• 申請日: 2019-08-06
• 公開（公告）號: CN112868228A
• 公開（公告）日: 2021-05-28
• 發明（設計）人: 佩曼·米蘭法;楊峰;崔盛中
• 申請（專利權）人: 谷歌有限責任公司
• 主分類號: H04N19/117
• 分類號: H04N19/117;H04N19/124;H04N19/154;H04N19/176;H04N19/86;H04N19/48
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 李佳;周亞榮

提供了用于銳化或以其它方式修改壓縮圖像而無需對圖像解壓縮和重新編碼的方法。整體圖像質量是基于壓縮圖像的源、壓縮圖像的量化表或者一些其它因素來確定的，并且與圖像質量相對應的縮放因數的集合被選擇。所選擇的縮放因數隨后被應用于圖像的量化表的對應量化因數或者描述壓縮圖像的圖像內容的壓縮圖像的其它參數。給定縮放因數的集合中的縮放因數可以由機器學習過程來確定，所述機器學習過程涉及到基于訓練圖像來訓練縮放因數，所述訓練圖像通過解壓縮并且隨后銳化或以其它方式修改壓縮圖像的源集合來確定。這些方法可以關于編碼圖像大小和圖像修改方法的計算成本提供改善。

相關申請的交叉引用

本申請要求于2018年12月05日提交的美國申請序列號16/210,900的權益，所述申請通過引用全文結合于此。

背景技術

數字圖像可以被壓縮以便提供諸如減少數字圖像的存儲和/或傳輸成本的優勢。存在用于圖像壓縮的各種有損和無損方法。有損圖像壓縮方法導致了輸入圖像的壓縮版本，其無法被用來精確地重新生成輸入圖像。然而，這樣的有損壓縮方法允許生成對于人類感知而言表現為與輸入圖像充分相似的輸出圖像，從而在至少一些場境中是能夠被接受的。一些有損圖像壓縮技術可以允許以這種程度的相似度來換取有所提高的壓縮比，從而作為所輸出的、壓縮圖像的圖像質量降低的回報而允許較小的壓縮圖像文件大小。

發明內容

本公開的第一方面涉及一種用于有效增強壓縮圖像(例如，改善其銳度)的方法，該方法包括：(i)獲取編碼圖像，所述編碼圖像包括(a)指示相應空間頻率處編碼圖像的圖像內容的系數的集合，和(b)指示應用于系數的集合中的相應系數的縮放程度的量化因數的集合；(ii)獲取編碼圖像的質量值；(iii)基于質量值，從多個縮放因數的集合中選擇縮放因數的集合；(iv)通過應用所選擇的縮放因數的集合以縮放編碼圖像的量化因數的集合來生成經修改的編碼圖像；以及(v)將經修改的編碼圖像的指示傳送至請求方設備。

系數的集合可以是離散余弦變換系數。所選擇的縮放因數的集合可以包括N個縮放因數，其中該N個縮放因數中的每一個對應于相應不同的空間頻率，并且其中應用所選擇的縮放因數的集合以縮放編碼圖像的量化因數的集合包括將N個縮放因數中的每個給定縮放因數應用于量化因數的集合中與該給定縮放因數的空間頻率相對應的一個或多個量化因數。N可以是15。獲取編碼圖像的質量值可以包括確定編碼圖像是由用戶提交還是從視頻提取。獲取編碼圖像的質量值可以包括基于量化因數確定質量值。編碼圖像的量化因數可以被存儲在編碼圖像的量化表中。獲取編碼圖像可以包括從視頻流的幀中提取編碼圖像。編碼圖像可以根據JPEG圖像壓縮格式被編碼。

本公開的第二方面涉及一種方法，該方法包括：(i)獲取圖像的訓練集合，其中圖像的訓練集合中的每個圖像具有相應的質量值；(ii)基于訓練集合中的圖像的質量值來從訓練集合中選擇具有與特定質量值相對應的相應質量值的一個或多個圖像；并且針對一個或多個圖像中的每個給定圖像：(iii)獲取該給定圖像的編碼版本和該給定圖像的參考版本，其中該給定圖像的編碼版本包括(i)指示相應空間頻率處該給定圖像的圖像內容的系數的集合，和(ii)指示應用于系數的集合中的相應系數的縮放程度的量化因數的集合；(iv)應用與該特定質量值相對應的縮放因數的集合以縮放該給定圖像的編碼版本的量化因數的集合；(v)通過使用已經被縮放因數的集合縮放的量化因數對系數的集合進行解碼來生成該給定圖像的增強解碼版本；以及(vii)基于該給定圖像的增強解碼版本和該給定圖像的參考版本之間的比較關系來更新縮放因數的集合。