[發明專利]處理圖像/視頻數據的方法及裝置

有效

• 申請號: 201410177553.4
• 申請日: 2014-04-29
• 公開（公告）號: CN104144279B
• 公開（公告）日: 2017-08-18
• 發明（設計）人: 吳東興;周漢良;李坤儐
• 申請（專利權）人: 聯發科技股份有限公司
• 主分類號: H04N1/64
• 分類號: H04N1/64;H04N19/91
• 代理公司: 北京萬慧達知識產權代理有限公司11111
• 代理人: 楊穎,張金芝

【技術領域】

本發明關于圖像/視頻數據的處理，尤其關于在與殘余量信號相關的不同信道之間處理圖像/視頻數據的方法及裝置。

【背景技術】

圖像壓縮與視頻壓縮已被廣泛用于降低與各個圖像及視頻數據相關的所需存儲空間或帶寬。基本圖像(underlying image)或視頻數據通常包含多個信道(channel)。舉例來說，在數碼相機應用中，通常使用紅(R)、綠(G)和藍(B)色彩陣列的圖像傳感器(image sensor)來采集原始圖像(raw image)。當RGB色彩為采集或顯示應用提供方便的格式(format)來表示彩色圖像或視頻時，不得不平等地對待三個顏色信道來存儲或傳輸，而這可能并不是有效的。在圖像及視頻編碼領域，廣泛使用了各種亮度/色度(luminance/chrominance)色彩格式，其中每一色彩格式對應于一個亮度分量及兩個色度分量。舉例來說，YUV或YCrCb色彩格式在各種圖像及視頻壓縮標準中已被使用。由于人類視覺對色度信號較不敏感，因此能以較低的空間分辨率表示色度信號(即U/Cb及V/Cr)，在視覺品質上沒有劣化或只有較小劣化。也有亮度/色度色彩格式的其他變形。舉例來說，在No.7155055的美國專利中揭示的YCoCg色彩格式及在No.6044172的美國專利中揭示的可逆YUV色彩格式使用簡化的色彩變換矩陣(color transform matrix)，這樣一來在RGB及YCoCg/整數YUV格式之間只使用整數運算(integer operation)來轉換信號。在貝爾模板(Bayer pattern)中的RGB與YCoCg色彩格式之間也有一種色彩格式轉換，如公開號No.US2006/0083432的美國專利申請中所揭示。在典型的圖像/視頻壓縮系統中，壓縮程序分別應用于各個亮度及色度信道。

在基本色彩格式(primary color format)及亮度/色度格式之間的色彩轉換涉及到基于像素的運算，其中該轉換用一組線性方程式(即轉換矩陣)來表示。當亮度/色度格式移除基本色彩格式中初始圖像或視頻的不同信道間的若干冗余量時，在亮度/色度格式中不同信道間仍然有大量的相關性。對于亮度/色度格式中的圖像或視頻，有需要利用不同信道間的冗余量。此外，當利用不同信道間的冗余量時，有需要降低對現有圖像或視頻壓縮系統的影響。

圖1為圖像壓縮系統如數碼相機的范例。圖像傳感器110用來采集原始圖像數據120。圖像壓縮器130接收原始圖像數據120并應用圖像壓縮來產生壓縮圖像數據140。通常，圖像壓縮應用于亮度/色度色彩格式(如YUV)中的圖像數據。因此，在圖像壓縮器130中執行色彩轉換，將原始圖像首先轉換成亮度/色度格式，接著將圖像壓縮應用于各個信道。圖2為用于傳輸或接口應用(例如MIPI(移動行業處理器接口)，DSI(顯示器串行接口)及HDMI(高清晰多媒體接口)，Wi-Fi顯示或藍牙)的圖像壓縮的范例。方塊圖200A對應于發射器端，其中從發射器210接收原始圖像數據220。在機頂盒與HDTV(高清晰度電視)組之間的HDMI接口范例中，發射器對應于機頂盒以及接收器對應于HDTV組。圖像壓縮器230將原始圖像數據壓縮成壓縮圖像數據240。接著該壓縮圖像數據在媒質例如物理電纜或無線鏈路上傳輸。方塊圖220B對應于接收器端，其中在媒質上接收壓縮圖像數據250。接著該壓縮圖像數據由圖像解壓縮器260解壓縮以恢復原始圖像數據270。接著將該恢復的原始圖像數據提供至接收器280以顯示出來。