[發明專利]一種圖像處理方法及裝置

有效

• 申請號: 201910037310.3
• 申請日: 2019-01-15
• 公開（公告）號: CN109922331B
• 公開（公告）日: 2021-12-07
• 發明（設計）人: 楊萌;戴付建;趙烈烽
• 申請（專利權）人: 浙江舜宇光學有限公司
• 主分類號: H04N13/243
• 分類號: H04N13/243;H04N13/106;H04N13/128;H04N13/156;G06K9/62
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 江舟;張秀英

本發明提供了一種圖像處理方法及裝置，其中，該方法包括：分別通過第一鏡頭組、第二鏡頭組以及第三鏡頭組對場景進行拍攝得到第一圖像、第二圖像以及第三圖像；通過所述第一圖像、所述第二圖像以及所述第三圖像中的兩個圖像中像素的偏移量確定三個深度圖；將所述三個深度圖中的一個或多個與接收到的圖像信息進行組合，生成虛擬媒體信息；將所述虛擬媒體信息與所述第一圖像、所述第二圖像以及所述第三圖像之一進行組合，因此，可以解決相關技術中如何在不增加額外設備利用用戶攜帶的移動終端完成深度信息處理的問題，實現了在不增加額外設備的情況下，通過移動終端完成虛擬現實結合，提高了用戶體驗的效果。

技術領域

本發明涉及通信領域，具體而言，涉及一種圖像處理方法及裝置。

背景技術

增強現實(Augmented Reality，簡稱為AR)是在真實的現實世界視覺信息的基礎上加入包括視頻、圖像、文字、聲音等其他計算機產生的虛擬媒體信息的技術。該技術的一個重要應用領域是幫助用戶體驗當前場景中在物理距離上或者時間上不可能接觸的體驗，增加或提升用戶對真實世界場景中的信息的感知。但是AR技術可能要求專用的系統或者硬件設備，例如頭戴顯示器、智能眼鏡、帶有獨立顯卡的計算機等，這些都要求一定的成本或者使用環境，在無形中限制了AR的使用場景。尤其是AR中的深度信息處理過程是AR系統或者設備實現虛擬場景與現實場景融合的關鍵所在，能夠在不增加額外的設備利用用戶攜帶的移動終端完成深度信息處理仍是當前待解決的重要問題。

針對相關技術中如何在不增加額外設備利用用戶攜帶的移動終端完成深度信息處理的問題，尚未提出解決方案。

發明內容

本發明實施例提供了一種圖像處理方法及裝置，以至少解決相關技術中如何在不增加額外設備利用用戶攜帶的移動終端完成深度信息處理的問題。

根據本發明的一個實施例，提供了一種圖像處理方法，包括：

分別通過第一鏡頭組、第二鏡頭組以及第三鏡頭組對場景進行拍攝得到第一圖像、第二圖像以及第三圖像；

通過所述第一圖像與所述第二圖像中像素的偏移量確定第一深度圖，通過所述第二圖像與所述第三圖像中像素的偏移量確定第二深度圖，并通過所述第一圖像與所述第三圖像中像素的偏移量確定第三深度圖；

將所述第一深度圖、所述第二深度圖以及所述第三深度圖中的一個或多個與接收到的圖像信息進行組合，生成虛擬媒體信息；

將所述虛擬媒體信息與所述第一圖像、所述第二圖像以及所述第三圖像之一進行組合。

可選地，將所述第一深度圖、所述第二深度圖以及所述第三深度圖中的一個或多個與接收到的圖像信息進行組合，生成虛擬媒體信息包括：

確定所述第一深度圖、所述第二深度圖以及所述第三深度圖中誤差最小的深度圖，獲取所述誤差最小的深度圖中環境特征的深度信息，將所述深度信息與接收到的圖像信息進行組合，生成虛擬媒體信息；或者

確定所述第一深度圖、所述第二深度圖以及所述第三深度圖中誤差最小的深度圖，通過除所述誤差最小的深度圖之外的深度圖中誤差較小的部分對所述誤差最小的深度圖中誤差較大的對應部分進行補充，獲取補充后的所述誤差最小的深度圖中環境特征的深度信息，將所述深度信息與接收到的圖像信息進行組合，生成虛擬媒體信息；

可選地，將所述第一深度圖、所述第二深度圖以及所述第三深度圖中的一個或多個與接收到的圖像信息進行組合，生成虛擬媒體信息包括：

確定所述第一深度圖、所述第二深度圖以及所述第三深度圖中清晰度最高的深度圖，獲取所述清晰度最高的深度圖中環境特征的深度信息，將所述深度信息與接收到的圖像信息進行組合，生成虛擬媒體信息；或者