[發明專利]圖像處理裝置、圖像處理方法和程序

無效

• 申請號: 201010615082.2
• 申請日: 2010-12-17
• 公開（公告）號: CN102110287A
• 公開（公告）日: 2011-06-29
• 發明（設計）人: 渡邊真司
• 申請（專利權）人: 索尼公司
• 主分類號: G06T5/00
• 分類號: G06T5/00
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 楊林森;李春暉

技術領域

本發明涉及一種圖像處理裝置、圖像處理方法和程序，更具體地，涉及一種適合在校正出現模糊或者散焦的圖像時使用的圖像處理裝置、圖像處理方法和程序。

背景技術

在相關技術中，存在校正在拍攝的圖像中出現的手抖或者失焦(下文中簡稱為散焦)的校正技術。

例如，L.B.Lucy和William?Hardley?Richardson提出了Richardson-Lucy方法。然而，在這種方法中，當使用落在點擴展函數(PSF)的頻率軸上的零點的頻譜解決逆問題時，可能在零點處發現噪聲放大、振鈴產生等。另外，如果沒有準確地獲得PSF，則在零點處噪聲放大、振鈴產生等可能更加增大。

如果通過引入增益圖來準確地獲得PSF，則存在能夠抑制振鈴的余差去卷積技術(例如，參見Lu?Yuan，Jian?Sun，Long?Quan，Heung-YeungShum，Image?deblurring?with?blurred/noisy?image?pairs，ACMTransactions?on?Graphics(TOG)，v.26n.3，July?2007)。

然而，在相關技術的余差去卷積技術中，如果在PSF中存在誤差，則不能很好地恢復圖像的結構分量和殘差(余差部分)，可能產生更多振鈴。

為此，考慮應用基于Richardson-Lucy方法將用于分離圖像的結構分量和紋理分量的結構/紋理分離濾波器組合為靜止圖像手抖校正算法的技術(下文中稱為結構去卷積技術)。

在結構去卷積技術中，例如，通過作為一種類型的結構/紋理分離濾波器的全變差濾波器來分離出現模糊的圖像(下文中稱為模糊圖像)的結構分量和紋理分量，僅針對結構分量校正模糊，由此抑制噪聲或者振鈴產生。

這里，結構分量表示構成圖像的構架的分量，例如圖像幾乎不改變的平坦部分、圖像緩慢改變的傾斜部分和主體的輪廓或者邊緣。另外，紋理分量表示構成圖像的細節的部分，例如主體的詳細形狀。因此，大多數結構分量被包含在空間頻率的低頻分量中，而大多數紋理分量被包含在空間頻率的高頻分量中。

發明內容

然而，在上述結構去卷積技術中，優選減小計算量以進一步提高處理速度。

希望以更高的速度校正圖像的模糊和散焦，同時抑制圖像質量的劣化。

根據本發明的一個實施例，提供了一種圖像處理裝置，包括：紋理提取單元，被配置為提取G校正圖像的紋理分量，在G校正圖像中，對包括輸入圖像的G分量的G圖像的結構分量的模糊或者散焦進行了校正；掩模生成單元，被配置為生成掩模圖像，在掩模圖像中，對于輸入圖像的G分量的變化和R分量的變化之間的相關性或者輸入圖像的G分量的變化和B分量的變化之間的相關性中的至少一個相關性弱的區域，減小G校正圖像的紋理分量到R校正圖像和B校正圖像的合成量，其中在對通過縮小包括輸入圖像的R分量的R圖像而獲得的圖像的結構分量的模糊或者散焦進行校正之后R校正圖像還原到縮小之前的大小，在對通過縮小包括輸入圖像的B分量的B圖像而獲得的圖像的結構分量的模糊或者散焦進行校正之后B校正圖像還原到縮小之前的大小；以及合成單元，被配置為使用掩模圖像，將G校正圖像的紋理分量合成到R校正圖像和B校正圖像。

掩模生成單元可以生成第一掩模圖像，在第一掩模圖像中，對于R圖像的高頻分量和G圖像的高頻分量之間的相關性弱的區域，減小G校正圖像的紋理分量到R校正圖像的合成量；掩模生成單元生成第二掩模圖像，在第二掩模圖像中，對于B圖像的高頻分量和G圖像的高頻分量之間的相關性弱的區域，減小G校正圖像的紋理分量到B校正圖像的合成量，合成單元使用第一掩模圖像，將G校正圖像的紋理分量合成到R校正圖像，并且使用第二掩模圖像，將G校正圖像的紋理分量合成到B校正圖像。

掩模生成單元可以包括：高頻提取單元，被配置為提取R圖像、G圖像和B圖像的高頻分量；檢測單元，被配置為檢測R圖像的高頻分量和G圖像的高頻分量之間的差以及B圖像的高頻分量和G圖像的高頻分量之間的差；以及生成單元，被配置為生成第一掩模圖像，在第一掩模圖像中，對于R圖像的高頻分量和G圖像的高頻分量之間的差為大的區域，減小G校正圖像的紋理分量到R校正圖像的合成量；并且生成第二掩模圖像，在第二掩模圖像中，對于B圖像的高頻分量和G圖像的高頻分量之間的差為大的區域，減小G校正圖像的紋理分量到B校正圖像的合成量。