[發明專利]全景實時圖像處理方法

在審

• 申請號: 201611168672.9
• 申請日: 2016-12-16
• 公開（公告）號: CN108206909A
• 公開（公告）日: 2018-06-26
• 發明（設計）人: 陳冠宇;張新岳
• 申請（專利權）人: 旺玖科技股份有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232
• 代理公司: 北京律誠同業知識產權代理有限公司 11006
• 代理人: 王玉雙;李巖

本發明提供一種全景實時圖像處理方法。不同于現有技術無法實時性地生成360度全景影像，本發明的方法利用完成鏡頭參數校正的二個魚眼攝影機擷取視頻信息，并將所擷取的視頻信息經過視頻編碼和串流化處理之后，通過有線傳輸或無線傳輸的方式傳送至一電子產品，以藉由安裝于該電子產品的一圖像處理應用程序進行視頻譯碼處理、全景坐標轉換處理、影像縫接處理、以及邊緣平滑化處理，進而于該電子產品的顯示器上顯示一視球全景影像。此外，藉由可編程圖像處理器或數字信號處理器的協助，該圖像處理應用程序亦可對該視球全景影像進行視野參數運算之后，通過平面全景顯示模式、魚眼視野顯示模式、或人眼視野顯示模式予以顯示。

技術領域

本發明關于圖像處理的技術領域，尤指一種全景實時圖像處理方法。

背景技術

早期，膠卷攝影機或底片相機僅能夠拍攝的景象的角度范圍大約只有30度至50度，因此膠卷攝影機或底片相機無法將環景影像拍攝在同一張影像之中。近期，隨著數字相機的出現以及圖像處理技術的進步，現有的攝影技術已經可以利用多個鏡頭對單一景象進行全方位角度的影像擷取，然后通過圖像處理技術將多張影像拼接成一張360度全景影像。

請參閱圖1，顯示一種現有的360度全景影像生成技術的方法流程圖。如圖1所示，現有的360度全景影像生成技術包括以下方法步驟：

(S1’)：使用多個攝像元件進行影像擷取；

(S2’)：將所擷取的多幀影像的點坐標轉換成落于一半球面之上的多個球面坐標；

(S3’)：利用經緯映射法進一步地將該多幀影像轉換成多幀經緯圖像；

(S4’)：將該多幀經緯圖像進行光學剪裁之后，縫接生成一幀全景影像；

(S5’)：將該全景影像進行邊緣平滑化處理；

(S6’)：依據時間軸對每一幀全景圖像進行視頻編碼，進而生成一全景視頻并播放輸出。

雖然上述的360度全景影像生成技術目前已被廣泛地應用，然而，本案的發明人基于實務經驗發現，該360度全景影像生成技術仍顯示出以下缺陷：

(1)使用該多個攝像元件擷取該多幀影像之時，除了基于同一光學中心(commonoptical center)以外，更必須確保該多幀影像彼此之間具有一個部份重疊影像區域。顯然，該360度全景影像生成技術于實施上包含了許多限制條件；

(2)于該360度全景影像生成技術的應用過程中，由于所述攝像元件為廣角鏡頭(例如魚眼鏡頭)，因此在縫接生成全景影像之前，必須對所擷取的多幀影像進行鏡頭扭曲校正處理。然而，如熟悉圖像處理技術的工程人員所熟知的，圖像處理需耗費大量運算資源及時間，人眼若想觀看順暢的視頻，則每秒鐘需處理24～30張影像信息，超過一般硬件裝置可達到的限制；由此可知，習知的360度全景影像生成技術無法實時性地生成360度全景影像。

因此，有鑒于習知的全景影像生成技術仍具有技術應用上的缺陷與不足，本案的發明人極力加以研究發明，而終于研發完成本發明的一種全景實時圖像處理方法。

發明內容

本發明的主要目的，在于提供一種全景實時圖像處理方法。不同于習知技術無法實時性地生成360度全景影像，本發明的方法是利用完成鏡頭參數校正的二個魚眼攝影機擷取視頻信息，并將所擷取的視頻信息經過視頻編碼和串流化處理之后，通過有線傳輸或無線傳輸的方式傳送至一電子產品，以藉由安裝于該電子產品的一圖像處理應用程序進行視頻譯碼處理、全景坐標轉換處理、影像縫接處理、以及邊緣平滑化處理，進而于該電子產品的顯示器上顯示一視球全景影像。此外，藉由可編程圖像處理器或數字信號處理器的協助，該圖像處理應用程序亦可對該視球全景影像進行視野參數運算之后，將該二個魚眼攝影機所擷取的視頻信息通過平面全景顯示模式、魚眼視野顯示模式、或人眼視野顯示模式予以顯示。