[發明專利]圖像的建模方法、裝置、存儲介質和電子設備

有效

• 申請號: 202010108842.4
• 申請日: 2020-02-21
• 公開（公告）號: CN111340960B
• 公開（公告）日: 2021-06-04
• 發明（設計）人: 黎曉迎;張宇;李子田;趙文杰
• 申請（專利權）人: 北京五一視界數字孿生科技股份有限公司
• 主分類號: G06T17/20
• 分類號: G06T17/20
• 代理公司: 北京英創嘉友知識產權代理事務所(普通合伙) 11447
• 代理人: 王曉霞

1.一種圖像的建模方法，其特征在于，所述方法包括：

按照預設規則提取目標圖像中的圖形元素，和所述目標圖像中的物體的屬性信息，其中，所述物體的屬性信息包括所述物體的語義信息和位置信息，所述語義信息用于反映所述物體的類別，所述位置信息用于反映所述物體的位置關系；

根據所述圖形元素建立所述目標圖像對應的初始三維空間；

根據每個所述物體的語義信息和位置信息，確定該物體的邊緣坐標，根據該物體的邊緣坐標，生成該物體對應的立方體，將全部所述物體中每個所述物體對應的所述立方體拼接為目標三維空間，每個所述立方體包括至少一個所述物體；

獲取所述目標圖像的二維紋理與所述目標三維空間的三維網格的UV映射；

根據所述UV映射將所述目標圖像的二維紋理投影到所述目標三維空間的三維網格中，以得到所述目標三維模型；

根據所述目標三維模型與圖像處理引擎預先建立的三維場景，確定變換矩陣；

根據所述變換矩陣，將所述目標三維模型注冊到所述三維場景中；

將所述目標圖像映射到所述目標三維空間的三維網格中，以得到所述目標圖像對應的目標三維模型。

2.根據權利要求1所述的方法，其特征在于，所述圖形元素包括：所述目標圖像中的輪廓直線、滅點和平面；所述按照預設規則提取目標圖像中的圖形元素，和所述目標圖像中的物體的屬性信息，包括：

根據直線檢測算法提取所述目標圖像中的輪廓直線，所述輪廓直線用于指示所述目標圖像包含的場景的輪廓；

根據所述輪廓直線確定所述目標圖像中的滅點和平面；

根據圖像識別算法識別所述目標圖像中所述物體的語義信息和位置信息。

3.根據權利要求2所述的方法，其特征在于，所述根據所述輪廓直線確定所述目標圖像中的滅點和平面，包括：

根據多條所述輪廓直線中，任意兩條所述輪廓直線的夾角，確定目標輪廓直線；

將所述目標輪廓直線的延長線的交點作為所述目標圖像中的滅點；

根據多條所述輪廓直線確定所述平面。

4.一種圖像的建模裝置，其特征在于，所述裝置包括：

提取模塊，用于按照預設規則提取目標圖像中的圖形元素，和所述目標圖像中的物體的屬性信息，其中，所述物體的屬性信息包括所述物體的語義信息和位置信息，所述語義信息用于反映所述物體的類別，所述位置信息用于反映所述物體的位置關系；

建立模塊，用于根據所述圖形元素建立所述目標圖像對應的初始三維空間；

分解模塊，用于根據所述圖形元素建立所述目標圖像對應的初始三維空間；根據每個所述物體的語義信息和位置信息，確定該物體的邊緣坐標，根據該物體的邊緣坐標，生成該物體對應的立方體，將全部所述物體中每個所述物體對應的所述立方體拼接為目標三維空間，每個所述立方體包括至少一個所述物體；

輸入模塊，用于

獲取所述目標圖像的二維紋理與所述目標三維空間的三維網格的UV映射；根據所述UV映射將所述目標圖像的二維紋理投影到所述目標三維空間的三維網格中，以得到所述目標三維模型；根據所述目標三維模型與圖像處理引擎預先建立的三維場景，確定變換矩陣；根據所述變換矩陣，將所述目標三維模型注冊到所述三維場景中；

映射模塊，用于將所述目標圖像映射到所述目標三維空間的三維網格中，以得到所述目標圖像對應的目標三維模型。

5.根據權利要求4所述的裝置，其特征在于，所述圖形元素包括：所述目標圖像中的輪廓直線、滅點和平面；所述提取模塊包括：

提取子模塊，用于根據直線檢測算法提取所述目標圖像中的輪廓直線，所述輪廓直線用于指示所述目標圖像包含的場景的輪廓；

第一確定子模塊，用于根據所述輪廓直線確定所述目標圖像中的滅點和平面；

識別子模塊，用于根據圖像識別算法識別所述目標圖像中所述物體的語義信息和位置信息。

6.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，該程序被處理器執行時實現權利要求1-3中任一項所述方法的步驟。

7.一種電子設備，其特征在于，包括：

存儲器，其上存儲有計算機程序；

處理器，用于執行所述存儲器中的所述計算機程序，以實現權利要求1-3中任一項所述方法的步驟。