[發明專利]圖像整理系統、圖像整理方法和計算機程序

有效

• 申請號: 201080061269.0
• 申請日: 2010-12-14
• 公開（公告）號: CN102713975A
• 公開（公告）日: 2012-10-03
• 發明（設計）人: 浜田康志
• 申請（專利權）人: 日本電氣株式會社
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06T7/60
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 楊靜

技術領域

本發明涉及一種圖像整理技術。

背景技術

作為臉部圖像整理技術，使用非向前看的臉部圖像的整理技術是可用的。這種使用非向前看的臉部圖像的技術非常方便，因為不必強迫目標個體將他們的臉部轉向成像設備。

作為臉部圖像整理技術的示例，以下專利文獻1公開了分別根據配準對象的圖像和目標對象的輸入圖像來檢測對象圖像上亮度值變化非常大的特征區域或點(特征點)(例如，眼睛和嘴)，并且確定特征點的位置與輸入圖像的特征點的位置最相似的圖像，從而計算目標對象的位置、姿勢等。

以下非專利文獻1公開了從臉上最小特征(例如，痣、皺紋、雀斑)中確定兩個圖像之間對應點的組合，作為對應的特征點，并且基于每個對應的特征點的相似度和位置來計算兩個圖像的整理得分。

現有技術文獻

專利文獻

[專利文獻1]日本專利文獻No.4167390。

非專利文獻

[非專利文獻1]“Face?image?matching?using?corresponding?feature?points?on?detailed?textures”，Technical?Report?of?IEICE，Vol.108，No.198，PRMU?2008-75，pp.175-180，Sept.2008，Yasushi?Hamada，Hitoshi?Imaoka。

發明內容

然而，根據專利文獻1中公開的技術，如果目標個體向側面看，則不能檢測到臉部前面區域上存在的特征點(例如，眼睛、嘴)，并因此與參考圖像的整理精度下降。

在非專利文獻1中公開的技術中，如果整理目標對象的成像方向與參考對象的成像方向非常不同，則不能檢測到對應的特征點，或者需要大量處理來檢測對應的特征點。

本發明要解決的技術問題

本發明的示例性目的是提供一種用于圖像整理的新架構。

問題解決方案

本發明的圖像整理系統包括：三維數據存儲裝置，用于存儲與參考對象的至少形狀和紋理有關的三維數據；第一方向估計裝置，用于通過比較整理目標對象的圖像與三維數據存儲裝置中存儲的參考對象的三維數據之間的全局特征，來估計與整理目標對象的成像方向匹配的參考對象的第一成像方向；第二方向估計裝置，基于三維數據，生成與參考對象的第一成像方向相對應的圖像，并且通過比較整理目標對象的圖像與對應于第一成像方向的生成圖像之間的局部特征，來估計參考對象的與整理目標對象的成像方向匹配的第二成像方向；以及圖像一致性確定裝置，用于基于三維數據，生成與參考對象的第二成像方向相對應的圖像，并且基于整理目標對象的圖像是否與對應于第二成像方向的生成圖像相匹配，來確定整理目標對象是否對應于參考對象。

根據本發明的示例性方面，第二方向估計裝置可以提取整理目標對象圖像和與參考對象的第一成像方向相對應的圖像中對應的部分區域，并且確定參考對象的第二成像方向，使得提取的對應部分區域彼此交疊。

根據本發明的另一示例性方面，第二方向估計裝置可以改變與參考對象的第一成像方向相對應的圖像的每個部分區域的成像方向，使得部分區域變得最相似于整理目標對象的圖像的每個部分區域，并且確定整理目標對象圖像中相似度最高的部分區域，作為對應的部分區域。

根據本發明的另一示例性實施例，圖像一致性確定裝置可以基于分別比較這些圖像之間全局特征和局部特征的結果，來確定與參考對象的第二成像方向相對應的圖像是否與整理目標對象的圖像匹配。

根據本發明的另一示例性實施例，整理目標對象和參考對象是人臉，并且局部特征是基于以下中的至少一個的圖像特征：臉部皮膚上的痣、斑、雀斑、毛孔和腫塊。

一種本發明的圖像整理方法包括：第一方向估計步驟，用于通過比較整理目標對象的圖像與三維數據存儲裝置中存儲的關于參考對象的至少形狀和紋理的三維數據之間的全局特征，來估計參考對象的與整理目標對象的成像方向匹配的第一成像方向；第二方向估計步驟，基于三維數據，生成與參考對象的第一成像方向相對應的圖像，并且通過比較整理目標對象的圖像與對應于第一成像方向的生成圖像之間的局部特征，來估計參考對象的與整理目標對象的成像方向匹配的第二成像方向；以及圖像一致性確定步驟，用于基于三維數據，生成與參考對象的第二成像方向相對應的圖像，并且基于整理目標對象的圖像是否與對應于第二成像方向的生成圖像相匹配，來確定整理目標對象是否對應于參考對象。

一種本發明的計算機程序是用于使計算機執行上述圖像整理方法的計算機程序。