[發(fā)明專利]合成影像制作裝置、合成影像制作方法以及記錄介質(zhì)

有效

• 申請?zhí)枺?/td>: 201980019557.0
• 申請日: 2019-03-12
• 公開（公告）號: CN111869198B
• 公開（公告）日: 2021-12-14
• 發(fā)明（設(shè)計）人: 速水淳
• 申請（專利權(quán)）人: 株式會社村上開明堂
• 主分類號: H04N7/18
• 分類號: H04N7/18;B60R1/00;G06T7/33
• 代理公司: 北京林達(dá)劉知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11277
• 代理人: 劉新宇

1.一種合成影像制作裝置，將具有相互重疊的區(qū)域的兩個影像通過該相互重疊的區(qū)域相連來制作合成影像，

所述合成影像制作裝置構(gòu)成為具有圖像獲取部、特征量提取部、圖像變換矩陣生成部、圖像轉(zhuǎn)換部、圖像輸出部以及校正判定部，

其中，所述圖像獲取部以從所述兩個影像各獲取一個圖像的方式依次獲取兩個圖像，

所述特征量提取部關(guān)于進(jìn)行所述獲取所得到的兩個圖像分別檢測特征點，并且分別提取進(jìn)行該檢測所得到的特征點的特征量，

所述圖像變換矩陣生成部基于進(jìn)行所述提取所得到的特征點的特征量來檢測所述兩個圖像的對應(yīng)點，基于進(jìn)行該檢測所得到的對應(yīng)點的坐標(biāo)來依次生成將所述兩個圖像的坐標(biāo)系進(jìn)行對應(yīng)的圖像變換矩陣，

所述圖像轉(zhuǎn)換部使用進(jìn)行所述生成所得到的圖像變換矩陣對所述兩個圖像中的至少一個圖像進(jìn)行坐標(biāo)轉(zhuǎn)換，來將所述兩個圖像的坐標(biāo)系進(jìn)行對應(yīng)，

所述圖像輸出部將所述坐標(biāo)系相對應(yīng)的兩個圖像彼此疊加來制作合成圖像，并且輸出該合成圖像，

所述校正判定部將當(dāng)前使用的圖像變換矩陣和新生成的圖像變換矩陣進(jìn)行對比，根據(jù)用于判定這兩個圖像變換矩陣的差異度或相似度的規(guī)定的判定基準(zhǔn)來判定所述兩個圖像變換矩陣是否相似，在判定為相似時，使所述圖像轉(zhuǎn)換部繼續(xù)使用所述當(dāng)前使用的圖像變換矩陣進(jìn)行所述坐標(biāo)轉(zhuǎn)換，在判定為所述兩個圖像變換矩陣不相似時，通過所述新生成的圖像變換矩陣對使用于所述坐標(biāo)轉(zhuǎn)換的圖像變換矩陣進(jìn)行校正來使所述圖像轉(zhuǎn)換部進(jìn)行所述坐標(biāo)轉(zhuǎn)換，

所述合成影像制作裝置根據(jù)時間的進(jìn)展依次進(jìn)行所述合成圖像的制作來制作所述合成影像。

2.根據(jù)權(quán)利要求1所述的合成影像制作裝置，其中，

所述校正判定部使用判定基準(zhǔn)來判定所述兩個圖像變換矩陣的差異度或相似度，作為所述判定基準(zhǔn)，使用將基于所述當(dāng)前使用的圖像變換矩陣和所述新生成的圖像變換矩陣的對應(yīng)的要素彼此的要素值之差的值設(shè)為指標(biāo)值的判定基準(zhǔn)。

3.根據(jù)權(quán)利要求1所述的合成影像制作裝置，其中，

所述特征量提取部針對隔開適當(dāng)?shù)臅r間間隔的圖像提取所述特征量。

4.根據(jù)權(quán)利要求2所述的合成影像制作裝置，其中，

所述特征量提取部針對隔開適當(dāng)?shù)臅r間間隔的圖像提取所述特征量。

5.根據(jù)權(quán)利要求1至4中的任一項所述的合成影像制作裝置，其中，

所述校正判定部在判定為所述圖像變換矩陣不相似時，以被判定為該不相似的狀態(tài)持續(xù)規(guī)定時間為條件，通過所述新生成的圖像變換矩陣對使用于所述坐標(biāo)轉(zhuǎn)換的圖像變換矩陣進(jìn)行校正。

6.根據(jù)權(quán)利要求1至4中的任一項所述的合成影像制作裝置，其中，

關(guān)于相鄰的兩個影像分別具有相互重疊的區(qū)域的三個以上的影像，針對該相鄰的每兩個影像進(jìn)行所述圖像獲取部、所述特征量提取部、所述圖像變換矩陣生成部、所述圖像轉(zhuǎn)換部、所述圖像輸出部、所述校正判定部中的處理，將所述三個以上的影像通過所述相互重疊的區(qū)域分別相連來制作合成影像。

7.根據(jù)權(quán)利要求5所述的合成影像制作裝置，其中，

關(guān)于相鄰的兩個影像分別具有相互重疊的區(qū)域的三個以上的影像，針對該相鄰的每兩個影像進(jìn)行所述圖像獲取部、所述特征量提取部、所述圖像變換矩陣生成部、所述圖像轉(zhuǎn)換部、所述圖像輸出部、所述校正判定部中的處理，將所述三個以上的影像通過所述相互重疊的區(qū)域分別相連來制作合成影像。

8.根據(jù)權(quán)利要求1至4中的任一項所述的合成影像制作裝置，其中，

關(guān)于相鄰的兩個影像分別具有相互重疊的區(qū)域的車輛后方的左方向、車輛后方的中央方向、車輛后方的右方向的三個影像，針對所述相鄰的每兩個影像進(jìn)行所述圖像獲取部、所述特征量提取部、所述圖像變換矩陣生成部、所述圖像轉(zhuǎn)換部、所述圖像輸出部、所述校正判定部中的處理，將所述三個影像通過所述相互重疊的區(qū)域分別相連來制作合成影像。