[發(fā)明專利]對象三維重建方法、裝置、電子設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010348666.1
• 申請日: 2020-04-28
• 公開（公告）號: CN113570634A
• 公開（公告）日: 2021-10-29
• 發(fā)明（設(shè)計）人: 馬里千;張國鑫;孫佳佳;張博寧
• 申請（專利權(quán)）人: 北京達佳互聯(lián)信息技術(shù)有限公司
• 主分類號: G06T7/194
• 分類號: G06T7/194;G06T7/62;G06T7/73;G06T7/90;G06T17/20;G06K9/00
• 代理公司: 北京同達信恒知識產(chǎn)權(quán)代理有限公司 11291
• 代理人: 張愷寧

1.一種對象三維重建方法，其特征在于，包括：

獲取二維目標(biāo)圖像包含的對象中各個部位的關(guān)鍵信息，其中所述關(guān)鍵信息包括關(guān)鍵點和/或蒙版圖像；

基于所述關(guān)鍵信息，獲得由第一差異和第二差異確定的損失函數(shù)，其中所述第一差異為根據(jù)所述對象的三維目標(biāo)網(wǎng)格在二維空間的投影確定的關(guān)鍵信息與根據(jù)所述二維目標(biāo)圖像獲取的關(guān)鍵信息之間的差異，所述第二差異為所述三維目標(biāo)網(wǎng)格中各個頂點與相鄰頂點的相對位置，與所述對象的預(yù)設(shè)三維網(wǎng)格中各個頂點與相鄰頂點的相對位置之間的差異；

確定所述損失函數(shù)取最小值時所使用的三維目標(biāo)網(wǎng)格中各個頂點的位置坐標(biāo)；

根據(jù)確定的各個頂點的位置坐標(biāo)進行三維重建，生成與所述對象對應(yīng)的三維模型。

2.如權(quán)利要求1所述的方法，其特征在于，所述二維目標(biāo)圖像是按照預(yù)設(shè)圖層次序?qū)⑺龈鱾€部位的分層圖像疊加得到的，每個所述分層圖像包括至少一個對象的部位，不同的分層圖像包括的部位不同；

所述獲取二維目標(biāo)圖像包含的對象中各個部位的關(guān)鍵信息，包括：

獲取所述二維目標(biāo)圖像包含的對象中各個部位的分層圖像，其中所述各個部位的分層圖像是根據(jù)預(yù)設(shè)的各個部位的分層模板生成的；

從所述各個部位的分層圖像中提取與各個部位對應(yīng)的關(guān)鍵信息。

3.如權(quán)利要求1所述的方法，其特征在于，所述獲取二維目標(biāo)圖像包含的對象中各個部位的關(guān)鍵信息，包括：

針對任意一個部位，將所述二維目標(biāo)圖像中與所述部位對應(yīng)的圖像轉(zhuǎn)換為蒙版圖像，并將所述蒙版圖像作為所述部位的關(guān)鍵信息；或

針對任意一個部位，提取所述部位在所述二維目標(biāo)圖像中對應(yīng)的關(guān)鍵點，并將提取的關(guān)鍵點作為所述部位的關(guān)鍵信息。

4.如權(quán)利要求3所述的方法，其特征在于，在所述基于所述關(guān)鍵信息，獲得由第一差異和第二差異確定的損失函數(shù)之前，還包括：

若所有部位的關(guān)鍵信息都為蒙版圖像，則將各個部位對應(yīng)的第一蒙版向量和第二蒙版向量的距離之和作為所述第一差異；其中，部位對應(yīng)的第一蒙版向量為根據(jù)所述投影獲得的所述部位的蒙版圖像中所有像素點的位置坐標(biāo)組合得到的，部位對應(yīng)的第二蒙版向量為根據(jù)所述二維目標(biāo)圖像獲得的所述部位的蒙版圖像中所有像素點的位置坐標(biāo)組合得到的。

5.如權(quán)利要求3所述的方法，其特征在于，在所述基于所述關(guān)鍵信息，獲得由第一差異和第二差異確定的損失函數(shù)之前，還包括：

若所有部位的關(guān)鍵信息都為關(guān)鍵點，則將各個部位對應(yīng)的第一位置向量和第二位置向量的距離之和作為所述第一差異；其中，部位對應(yīng)的第一位置向量是根據(jù)所述投影獲得的所述部位的關(guān)鍵點的位置向量，部位對應(yīng)的第二位置向量是根據(jù)所述二維目標(biāo)圖像獲得的所述部位的關(guān)鍵點的位置向量。

6.如權(quán)利要求3所述的方法，其特征在于，在所述基于所述關(guān)鍵信息，獲得由第一差異和第二差異確定的損失函數(shù)之前，還包括：

若所有部位中第一目標(biāo)部位的關(guān)鍵信息為蒙版圖像，第二目標(biāo)部位的關(guān)鍵信息為關(guān)鍵點，則將各個第一目標(biāo)部位對應(yīng)的第一蒙版向量與第二蒙版向量的距離之和作為蒙版差異，以及將各個第二目標(biāo)部位對應(yīng)的第一位置向量與第二位置向量的距離之和作為關(guān)鍵點差異，并根據(jù)所述蒙版差異和所述關(guān)鍵點差異確定所述第一差異。

7.如權(quán)利要求6所述的方法，其特征在于，在所述基于所述關(guān)鍵信息，獲得由第一差異和第二差異確定的損失函數(shù)之前，還包括：

針對任意一個部位，確定所述部位在所述二維目標(biāo)圖像中所占的面積；

若所述部位所占的面積大于預(yù)設(shè)閾值，則確定所述部位為第一目標(biāo)部位；

若所述部位所占的面積不大于預(yù)設(shè)閾值，則確定所述部位為第二目標(biāo)部位。