[發明專利]圖像處理裝置及圖像處理的方法

有效

• 申請號: 201910555216.7
• 申請日: 2019-06-25
• 公開（公告）號: CN110264406B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 蔡宗諭;陳奕志
• 申請（專利權）人: 威盛電子（深圳）有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T7/90;G06V10/46
• 代理公司: 北京林達劉知識產權代理事務所(普通合伙) 11277
• 代理人: 劉新宇

一種圖像處理裝置及圖像處理的方法。圖像處理裝置包括至少一個圖像擷取裝置及處理器。處理器從圖像擷取裝置接收第一圖像與第二圖像，并識別第一圖像與第二圖像之間的重疊區域。處理器分析所述重疊區域以獲得多個特征點、第一經光流調整區域及第二經光流調整區域，利用特征點作為頂點以將第一經光流調整區域及第二經光流調整區域劃分為多個三角區塊，將第一經光流調整區域及第二經光流調整區域中對應的三角區塊進行混合以形成經拼接區域，組合經拼接區域及第一圖像與第二圖像中的多個未重疊區域以產生經拼接圖像。由此大幅降低運算復雜度并可具備較佳的影像品質，從而適用于圖像拼接的實時運算、立體圖像及影像生成等諸多實時性應用。

技術領域

本發明涉及一種圖像(image)及影像(video)處理技術，且特別涉及一種利用稀疏光流法及三角區塊進行圖像拼接以降低運算復雜度的圖像處理裝置及圖像處理的方法。

背景技術

圖像擷取技術越發進步的現今，使用者經常希望能利用手上的消費型電子設備來擷取視角更大、更為立體的畫面及影像。然而，由于單一照相機或攝影機有其自身的鏡頭視角大小的問題，若希望獲得立體或是廣域(如，180度或360度)視角的圖像的話，常用多臺照相機或攝影機同時擷取影像并將這些影像進行拼接，便是目前最常使用的影像擷取與拼接技術。

許多影像拼接技術/影像匹配技術需要十分大量的運算量來計算兩張或多張圖像上所有像素點的偏移量，才能進行像素級別的圖像匹配/圖像拼接。然而，上述做法需要許多硬件運算量來實現，難以應用于實時性的圖像拼接應用。

發明內容

本發明提供一種圖像處理裝置及圖像處理的方法，利用稀疏光流法及三角區塊進行圖像拼接，以大幅降低運算復雜度并可具備較佳的影像品質，從而適用于圖像拼接的實時運算、立體圖像及影像生成等諸多實時性應用。

本發明實施例的圖像處理裝置包括至少一個圖像擷取裝置以及處理器。所述至少一個圖像擷取裝置用以擷取第一圖像與第二圖像。第一圖像與第二圖像部分重疊。處理器耦接圖像擷取裝置。處理器從圖像擷取裝置接收第一圖像與第二圖像，識別第一圖像與第二圖像之間的重疊區域以作為第一重疊區域及第二重疊區域。處理器分析第一重疊區域及第二重疊區域以獲得多個特征點、第一經光流調整區域及第二經光流調整區域。處理器利用所述特征點作為頂點以將第一經光流調整區域及第二經光流調整區域劃分為多個三角區塊，并將第一經光流調整區域及第二經光流調整區域中對應的三角區塊進行混合以形成經拼接區域。處理器組合經拼接區域及第一圖像與第二圖像中的多個未重疊區域以產生經拼接圖像。經拼接圖像為第一圖像與第二圖像的拼接結果。

本發明實施例的圖像處理的方法包括：獲得第一圖像與第二圖像，其中第一圖像與第二圖像部分重疊；識別第一圖像與第二圖像之間的重疊區域以作為第一重疊區域及第二重疊區域；分析第一重疊區域及第二重疊區域以獲得多個特征點、第一經光流調整區域及第二經光流調整區域；利用所述特征點作為頂點以將第一經光流調整區域及第二經光流調整區域劃分為多個三角區塊，并將第一經光流調整區域及第二經光流調整區域中對應的三角區塊進行混合以形成經拼接區域；以及，組合經拼接區域及第一圖像與第二圖像中的多個未重疊區域以產生經拼接圖像，經拼接圖像為第一圖像與第二圖像的拼接結果。

基于上述，本發明實施例所述的圖像處理裝置及圖像處理的方法在進行兩個圖像的圖像拼接時，利用圖像特征檢測法及稀疏光流法以分析圖像中重疊區域，從而產生數個特征點及經由稀疏光流法處理后的重疊區域。然后，圖像處理裝置利用這些特征點劃分處理后的重疊區域以獲得數個三角區塊，借以將重疊區域中位于相同位置的三角區塊利用視圖插值、像素混合等方式進行混合以形成經拼接區域，并利用第一圖像與第二圖像中的多個未重疊區域以產生經拼接圖像。換言之，本發明實施例利用稀疏光流法及三角區塊進行圖像拼接，且不需通過稠密光流法將重疊區域中的每個像素都進行運算，由此大幅降低運算復雜度并可具備較佳的影像品質，從而適用于圖像拼接的實時運算、立體圖像及影像生成等諸多實時性應用。

為讓本發明的上述特征和優點能更明顯易懂，下文特舉實施例，并配合所附圖示作詳細說明如下。

附圖說明