[發明專利]圖像處理方法、裝置、電子設備及存儲介質

在審

• 申請號: 202110874074.8
• 申請日: 2021-07-30
• 公開（公告）號: CN113470154A
• 公開（公告）日: 2021-10-01
• 發明（設計）人: 朱恬倩;施侃樂;李雅子;鄭文
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: G06T15/00
• 分類號: G06T15/00;G06T15/04;G06T15/06;G06T7/33
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 周清華

本公開關于一種圖像處理方法、裝置、電子設備及存儲介質，包括：獲取待渲染對象的第一變換矩陣、第二變換矩陣，及光場圖像顯示模型；光場模型由多張光場圖像構成；根據第一變換矩陣以及第二變換矩陣，確定出光場模型的攝影點坐標；光場模型的攝影點坐標用于從多張光場圖像中確定出用于渲染的目標光場圖像；根據攝影點坐標，得到光場圖像顯示模型的目標變換矩陣；將目標光場圖像作為紋理元素加載至光場圖像顯示模型的顯示區域，得到目標光場圖像顯示模型；通過目標變換矩陣將目標光場圖像顯示模型變換至相機坐標系，變換后的目標光場圖像顯示模型用于對待渲染對象進行渲染。本方法能夠替代三維模型對圖像進行渲染，提高了圖像處理效果。

技術領域

本公開涉及計算機視覺技術，尤其涉及一種圖像處理方法、裝置、電子設備及存儲介質。

背景技術

傳統的增強現實技術實現過程中，疊加在真實照片之上的圖像往往是通過三維模型的實時渲染得到的；在這個過程中，虛擬物體的三維形狀數據是不可或缺的。

然而，受限于算力及建模的成本，在對圖像進行處理時往往存在高度抽象，使得大量細微結構難以通過三維模型網格進行完善的描述；即三維模型對圖像進行渲染過程中會丟失大量細節，導致圖像處理效果較差。因此，還需要一種能夠替代三維模型對圖像進行渲染的方式，以提高圖像處理效果。

發明內容

本公開提供一種圖像處理方法、裝置、電子設備及存儲介質，以至少解決相關技術中圖像處理效果較差的問題。本公開的技術方案如下：

根據本公開實施例的第一方面，提供一種圖像處理方法，包括：

獲取相機坐標系下待渲染對象的第一變換矩陣、所述待渲染對象的坐標系下光場模型的第二變換矩陣，及光場模型的坐標系下的光場圖像顯示模型；所述第一變換矩陣為所述待渲染對象的坐標系相對于所述相機坐標系的轉換關系，所述第二變換矩陣為所述光場模型的坐標系相對于所述待渲染對象的坐標系的轉換關系；所述光場模型由多張光場圖像構成；所述光場圖像顯示模型用于在虛擬空間中顯示光場圖像；

根據所述第一變換矩陣以及所述第二變換矩陣，確定出所述光場模型的攝影點坐標；所述光場模型的攝影點坐標用于確定出所述光場模型被觀察的角度，并從多張光場圖像中確定出用于渲染的目標光場圖像；

根據所述攝影點坐標，將所述光場圖像顯示模型變換至所述相機坐標系，得到所述光場圖像顯示模型從所述光場模型的坐標系轉換至所述相機坐標系的目標變換矩陣；

將所述目標光場圖像作為紋理元素加載至所述光場圖像顯示模型的顯示區域，得到目標光場圖像顯示模型；通過所述目標變換矩陣將所述目標光場圖像顯示模型變換至所述相機坐標系，變換后的目標光場圖像顯示模型用于對所述待渲染對象進行渲染。

在一示例性實施例中，所述根據所述第一變換矩陣以及所述第二變換矩陣，確定出所述光場模型的攝影點坐標，包括：

將所述第一變換矩陣以及所述第二變換矩陣相乘，得到所述光場模型在所述相機坐標下的第三變換矩陣；

分解所述第三變換矩陣，得到所述光場模型在所述相機坐標系下的位置向量以及旋轉矩陣；

根據所述位置向量以及所述旋轉矩陣，得到所述光場模型的攝影點坐標。

在一示例性實施例中，在分解所述第三變換矩陣，得到所述光場模型在所述相機坐標系下的位置向量以及旋轉矩陣之后，所述方法還包括：

獲取所述旋轉矩陣的三個列矩陣作為列向量；

將所述列向量進行歸一化處理，得到所述旋轉矩陣在所述相機坐標系下的坐標軸方向；所述坐標軸方向用于獲取所述光場模型的攝影點坐標。

在一示例性實施例中，所述根據所述位置向量以及所述旋轉矩陣，得到所述光場模型的攝影點坐標，包括：