[發明專利]圖像處理器、圖像處理方法、學習設備、學習方法和程序

在審

• 申請號: 201310022675.1
• 申請日: 2013-01-22
• 公開（公告）號: CN103226811A
• 公開（公告）日: 2013-07-31
• 發明（設計）人: 濱田健宏
• 申請（專利權）人: 索尼公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06T3/00
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 胡琪

1.一種圖像處理器，包括：

特征點提取部分，適配為提取作為由相機捕捉的圖像的輸入圖像的特征點；

對應性確定部分，適配為使用考慮相機的鏡頭失真而從參考圖像產生的特征點字典來確定由所述特征點提取部分提取的輸入圖像的特征點和參考圖像的特征點之間的對應性；

特征點坐標失真校正部分，適配為基于相機的鏡頭失真數據來校正由所述對應性確定部分確定的與參考圖像的特征點對應的輸入圖像的特征點的坐標；

投影關系計算部分，適配為根據所述對應性確定部分確定的對應性并基于參考圖像的特征點的坐標和特征點坐標失真校正部分校正的輸入圖像的特征點的坐標來計算輸入圖像和參考圖像之間的投影關系；

合成圖像坐標變換部分，適配為基于所述投影關系計算部分計算的投影關系以及相機的鏡頭失真數據而從合成圖像產生要附加的合成圖像；以及

輸出圖像產生部分，適配為將輸入圖像與由所述合成圖像坐標變換部分產生的要附加的合成圖像合并，并獲取輸出圖像。

2.如權利要求1所述的圖像處理器，其中

不僅考慮相機的鏡頭失真而且考慮隔行圖像而產生所述特征點字典。

3.一種圖像處理方法，包括：

提取作為由相機捕捉的圖像的輸入圖像的特征點；

使用考慮相機的鏡頭失真而從參考圖像產生的特征點字典來確定提取的輸入圖像的特征點和參考圖像的特征點之間的對應性；

基于相機的鏡頭失真數據來校正確定的與參考圖像的特征點對應的輸入圖像的特征點的坐標；

根據確定的對應性并基于參考圖像的特征點的坐標和輸入圖像的特征點的校正的坐標來計算輸入圖像和參考圖像之間的投影關系；

基于計算的投影關系以及相機的鏡頭失真數據而從合成圖像產生要附加的合成圖像；以及

將輸入圖像與產生的要附加的合成圖像合并，并獲取輸出圖像。

4.一種允許計算機用作以下部分的程序：

特征點提取部分，適配為提取作為由相機捕捉的圖像的輸入圖像的特征點；

對應性確定部分，適配為使用考慮相機的鏡頭失真而從參考圖像產生的特征點字典來確定由所述特征點提取部分提取的輸入圖像的特征點和參考圖像的特征點之間的對應性；

特征點坐標失真校正部分，適配為基于相機的鏡頭失真數據來校正由所述對應性確定部分確定的與參考圖像的特征點對應的輸入圖像的特征點的坐標；

投影關系計算部分，適配為根據所述對應性確定部分確定的對應性并基于參考圖像的特征點的坐標和特征點坐標失真校正部分校正的輸入圖像的特征點的坐標來計算輸入圖像和參考圖像之間的投影關系；

合成圖像坐標變換部分，適配為基于所述投影關系計算部分計算的投影關系以及相機的鏡頭失真數據而從合成圖像產生要附加的合成圖像；以及

輸出圖像產生部分，適配為將輸入圖像與由所述合成圖像坐標變換部分產生的要附加的合成圖像合并，并獲取輸出圖像。

5.一種學習設備，包括：

圖像變換部分，適配為向參考圖像至少應用使用變換參數的幾何變換以及使用鏡頭失真數據的鏡頭失真變換；以及

字典登記部分，適配為基于由所述圖像變換部分變換的多個圖像提取給定數量的特征點，并將特征點登記在字典中。

6.如權利要求5所述的學習設備，其中

所述字典登記部分包括：

特征點計算單元，適配為得到圖像變換部分變換的圖像的特征點；

特征點坐標變換單元，適配為將所述特征點計算單元得到的特征點的坐標變換為參考圖像的坐標；

出現頻率更新單元，適配為對于由所述圖像變換部分變換的每個參考圖像，基于由所述特征點坐標變換單元變換的特征點坐標來更新每個特征點的出現頻率；以及

特征點登記單元，適配為在出現頻率已經被所述出現頻率更新單元更新過的所有特征點中，提取從最高的出現頻率開始按出現頻率的降序順序的任意數量的特征點，并將這些特征點登記在字典中。

7.如權利要求5所述的學習設備，其中

所述圖像變換部分向參考圖像應用幾何變換和鏡頭失真變換，并通過選擇性地將逐行圖像轉換為隔行圖像而產生多個變換的圖像。

8.如權利要求5所述的學習設備，其中

圖像變換部分通過基于從多個鏡頭失真數據中隨機選擇的鏡頭失真數據應用鏡頭失真變換來產生多個變換的圖像。