[發明專利]三維重建方法、裝置、設備以及存儲介質有效
| 申請號： | 202110983352.3 | 申請日： | 2021-08-25 |
| 公開（公告）號： | CN113658309B | 公開（公告）日： | 2023-08-01 |
| 發明（設計）人： | 鞠波;葉曉青;譚嘯;孫昊 | 申請（專利權）人： | 北京百度網訊科技有限公司 |
| 主分類號： | G06T13/40 | 分類號： | G06T13/40;G06T15/00 |
| 代理公司： | 北京英賽嘉華知識產權代理有限責任公司 11204 | 代理人： | 王達佐;馬曉亞 |
| 地址： | 100085 北京市*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 三維重建 方法 裝置 設備 以及 存儲 介質 | ||
1.一種三維重建方法，包括：
根據初始三維人體模型，確定對應的目標二維圖像；
對所述目標二維圖像進行語義分割，確定所述目標二維圖像中各像素點的語義標簽；
根據所述初始三維人體模型中的蒙皮頂點與所述目標二維圖像中像素點的對應關系，確定各蒙皮頂點的語義標簽；
根據各蒙皮頂點的語義標簽，確定各蒙皮頂點的目標權重；
根據各目標權重，確定目標三維人體模型；
其中，所述根據各蒙皮頂點的語義標簽，確定各蒙皮頂點的目標權重，包括：
根據各蒙皮頂點的語義標簽，確定各蒙皮頂點的初始權重；
確定各蒙皮頂點中由關節處的骨骼節點驅動的候選蒙皮頂點；
對所述候選蒙皮頂點的初始權重進行調整，確定各蒙皮頂點的目標權重。
2.根據權利要求1所述的方法，其中，所述對所述目標二維圖像進行語義分割，確定所述目標二維圖像中各像素點的語義標簽，包括：
利用預先訓練的二維語義分割網絡對所述目標二維圖像進行語義分割，確定所述目標二維圖像中各像素點的語義標簽。
3.根據權利要求1所述的方法，其中，所述根據所述初始三維人體模型中的蒙皮頂點與所述目標二維圖像中像素點的對應關系，確定各蒙皮頂點的語義標簽，包括：
根據所述初始三維人體模型中的蒙皮頂點與所述目標二維圖像中像素點的對應關系，確定蒙皮頂點與像素點的匹配對；
根據所述目標二維圖像中各像素點的語義標簽，確定每個匹配對的語義標簽；
根據所述匹配對的語義標簽，確定各蒙皮頂點的語義標簽。
4.一種三維重建裝置，包括：
圖像確定單元，被配置成根據初始三維人體模型，確定對應的目標二維圖像；
語義分割單元，被配置成對所述目標二維圖像進行語義分割，確定所述目標二維圖像中各像素點的語義標簽；
標簽確定單元，被配置成根據所述初始三維人體模型中的蒙皮頂點與所述目標二維圖像中像素點的對應關系，確定各蒙皮頂點的語義標簽；
權重確定單元，被配置成根據各蒙皮頂點的語義標簽，確定各蒙皮頂點的目標權重；
三維重建單元，被配置成根據各目標權重，確定目標三維人體模型；
其中，所述權重確定單元進一步被配置成：
根據各蒙皮頂點的語義標簽，確定各蒙皮頂點的初始權重；
確定各蒙皮頂點中由關節處的骨骼節點驅動的候選蒙皮頂點；
對所述候選蒙皮頂點的初始權重進行調整，確定各蒙皮頂點的目標權重。
5.根據權利要求4所述的裝置，其中，所述語義分割單元進一步被配置成：
利用預先訓練的二維語義分割網絡對所述目標二維圖像進行語義分割，確定所述目標二維圖像中各像素點的語義標簽。
6.根據權利要求4所述的裝置，其中，所述標簽確定單元進一步被配置成：
根據所述初始三維人體模型中的蒙皮頂點與所述目標二維圖像中像素點的對應關系，確定蒙皮頂點與像素點的匹配對；
根據所述目標二維圖像中各像素點的語義標簽，確定每個匹配對的語義標簽；
根據所述匹配對的語義標簽，確定各蒙皮頂點的語義標簽。
7.一種電子設備，包括：
至少一個處理器；以及
與所述至少一個處理器通信連接的存儲器；其中，
所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行權利要求1-3中任一項所述的方法。
8.一種存儲有計算機指令的非瞬時計算機可讀存儲介質，所述計算機指令用于使所述計算機執行權利要求1-3中任一項所述的方法。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于北京百度網訊科技有限公司，未經北京百度網訊科技有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202110983352.3/1.html，轉載請聲明來源鉆瓜專利網。
