[發明專利]三維人物模型構建方法、裝置及存儲介質有效
| 申請號： | 202010177642.4 | 申請日： | 2020-03-13 |
| 公開（公告）號： | CN111401234B | 公開（公告）日： | 2022-06-14 |
| 發明（設計）人： | 張煜;邵志兢;謝俊 | 申請（專利權）人： | 深圳普羅米修斯視覺技術有限公司 |
| 主分類號： | G06V40/10 | 分類號： | G06V40/10;G06V10/25;G06V10/26;G06T3/00;G06T17/00 |
| 代理公司： | 深圳市宏德雨知識產權代理事務所(普通合伙) 44526 | 代理人： | 李捷 |
| 地址： | 518000 廣東省深圳市寶安區石巖*** | 國省代碼： | 廣東;44 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 三維 人物 模型 構建 方法 裝置 存儲 介質 | ||
1.一種三維人物模型構建方法，其特征在于，包括：
從目標圖像中分離人物圖像，并生成所述人物圖像對應的人物輪廓圖；
對所述人物圖像進行二維姿態預估，得到所述人物圖像的姿態特征；
基于預設三維人物模型以及所述姿態特征，生成對應的預設二維網格頂點投影圖；
獲取所述預設二維網格頂點投影圖的參照輪廓圖，并計算所述人物輪廓圖的像素點與所述參照輪廓圖的像素點的映射關系；
基于所述預設三維人物模型，對所述人物輪廓圖的像素點進行反投影計算，獲取所述人物輪廓圖的像素點的三維位置坐標；
以所述人物輪廓圖的像素點為控制點，基于所述預設二維網格頂點投影圖中的網格頂點的拓撲關系，計算所述人物圖像的其他像素點的三維位置坐標；
基于所述人物圖像的所有像素點的三維位置坐標構建三維人物模型；
其中基于下述公式計算所述人物輪廓圖的像素點與所述參照輪廓圖的像素點的映射關系：
其中pi為人物輪廓圖上的像素點，為參照輪廓圖上的對應像素點，φ[i]用于表示該映射關系對應的映射空間，κ為預設參數。
2.根據權利要求1所述的三維人物模型構建方法，其特征在于，所述對所述人物圖像進行姿態預估，得到所述人物圖像的姿態特征的步驟包括：
基于所述人物圖像中的人體關節點特征以及骨架走向特征進行姿態預估，以得到所述人物圖像的姿態特征。
3.根據權利要求1所述的三維人物模型構建方法，其特征在于，所述基于預設三維人物模型以及所述姿態特征，生成對應的預設二維網格頂點投影圖的步驟包括：
將所述姿態特征作為參數輸入至SMPL人體參數化三維模型框架，得到所述人物圖像對應姿態的SMPL人體參數化三維模型；
將所述SMPL人體參數化三維模型正視投影到二維圖像空間，得到對應的預設二維網格頂點投影圖。
4.根據權利要求1所述的三維人物模型構建方法，其特征在于，基于下述公式獲取所述人物輪廓圖的像素點的三維位置坐標：
其中M為目標圖像相機的預設內參矩陣，R為預設外參旋轉矩陣，T為預設外參平移向量，Z為預設基準參數，u、v為人物輪廓圖的像素點的二維坐標，Xw、Yw、Zw為人物輪廓圖的像素點的三維位置坐標。
5.根據權利要求1所述的三維人物模型構建方法，其特征在于，所述以所述人物輪廓圖的像素點為控制點，基于所述預設二維網格頂點投影圖中的網格頂點的拓撲關系，計算所述人物圖像的其他像素點的三維位置坐標的步驟包括：
基于SMPL人體參數化三維模型對應的預設二維網格頂點投影圖的網格頂點的拓撲關系，創建拉普拉斯坐標網格模型矩陣；
將所述人物輪廓圖的像素點的三維位置坐標輸入至所述拉普拉斯坐標網格模型矩陣；
使用帶位置約束的優化模型，對所述拉普拉斯坐標網絡模型矩陣求解，以得到所述人物圖像的其他像素點的三維位置坐標。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于深圳普羅米修斯視覺技術有限公司，未經深圳普羅米修斯視覺技術有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202010177642.4/1.html，轉載請聲明來源鉆瓜專利網。
