[發明專利]虛擬角色驅動方法及裝置、電子設備和存儲介質

有效

• 申請號: 201810381366.6
• 申請日: 2018-04-25
• 公開（公告）號: CN108648280B
• 公開（公告）日: 2023-03-31
• 發明（設計）人: 汪路超
• 申請（專利權）人: 深圳市商湯科技有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06T7/33;G06T7/50
• 代理公司: 北京林達劉知識產權代理事務所(普通合伙) 11277
• 代理人: 劉新宇

1.一種虛擬角色驅動方法，其特征在于，所述方法包括：

獲取關鍵點在二維圖像中的平面坐標，以及所述關鍵點在深度圖像中的關鍵點深度，所述二維圖像與所述深度圖像相對應；

根據所述關鍵點的所述平面坐標、所述關鍵點的所述關鍵點深度和初始模型參數，得到關鍵點擬合結果，所述初始模型參數至少包括：初始形狀參數；

根據所述關鍵點擬合結果驅動虛擬角色；

所述根據所述關鍵點擬合結果驅動虛擬角色，包括：

根據所述關鍵點擬合結果中的擬合點、所述二維圖像和所述深度圖像，得到擬合點擬合結果，所述擬合點為關鍵點以外的點；

根據所述擬合點擬合結果驅動虛擬角色。

2.根據權利要求1所述的方法，其特征在于，所述二維圖像與所述深度圖像相對應，包括：

所述二維圖像與所述深度圖像配準。

3.根據權利要求1或2所述的方法，其特征在于，根據所述關鍵點的所述平面坐標、所述關鍵點的所述關鍵點深度和初始模型參數，得到關鍵點擬合結果，包括：

根據所述關鍵點的所述平面坐標、所述關鍵點的所述關鍵點深度和初始模型參數，構建關鍵點擬合模型；

優化所述關鍵點擬合模型，得到模型擬合參數，并根據所述模型擬合參數確定關鍵點擬合結果。

4.根據權利要求3所述的方法，其特征在于，所述初始模型參數還包括：初始表面參數和初始位姿參數；

優化所述關鍵點擬合模型，得到模型擬合參數，并根據所述模型擬合參數確定關鍵點擬合結果，包括：

優化所述關鍵點擬合模型，得到第一位姿參數、第一形狀參數和第一表面參數，并根據所述第一位姿參數、所述第一形狀參數和所述第一表面參數確定關鍵點擬合結果，其中，所述關鍵點擬合結果中的關鍵點在所述二維圖像上投影的坐標與所述平面坐標之間的距離最小，所述關鍵點擬合結果中的關鍵點的擬合深度與所述關鍵點深度之間的差值最小。

5.一種虛擬角色驅動裝置，其特征在于，所述裝置包括：

關鍵點坐標獲取模塊，用于關鍵點獲取關鍵點在二維圖像中的平面坐標，以及所述關鍵點在深度圖像中的關鍵點深度，所述二維圖像與所述深度圖像相對應；

關鍵點擬合結果獲取模塊，用于根據所述關鍵點的所述平面坐標、所述關鍵點的所述關鍵點深度和初始模型參數，得到關鍵點擬合結果，所述初始模型參數至少包括：初始形狀參數；

第一虛擬角色驅動模塊，用于根據所述關鍵點擬合結果驅動虛擬角色；

所述第一虛擬角色驅動模塊，還用于：

根據所述關鍵點擬合結果中的擬合點、所述二維圖像和所述深度圖像，得到擬合點擬合結果，所述擬合點為關鍵點以外的點；

根據所述擬合點擬合結果驅動虛擬角色。

6.根據權利要求5所述的裝置，其特征在于，所述二維圖像與所述深度圖像相對應，包括：所述二維圖像與所述深度圖像配準。

7.根據權利要求5或6所述的裝置，其特征在于，所述關鍵點擬合結果獲取模塊，包括：

關鍵點擬合模型構建子模塊，用于根據所述關鍵點的所述平面坐標、所述關鍵點的所述關鍵點深度和初始模型參數，構建關鍵點擬合模型；

關鍵點擬合結果獲取子模塊，用于優化所述關鍵點擬合模型，得到模型擬合參數，并根據所述模型擬合參數確定關鍵點擬合結果。

8.根據權利要求7所述的裝置，其特征在于，所述初始模型參數還包括：初始表面參數和初始位姿參數；

所述關鍵點擬合結果獲取子模塊，包括：

第一擬合結果獲取子模塊，用于優化所述關鍵點擬合模型，得到第一位姿參數、第一形狀參數和第一表面參數，并根據所述第一位姿參數、所述第一形狀參數和所述第一表面參數確定關鍵點擬合結果，其中，所述關鍵點擬合結果中的關鍵點在所述二維圖像上投影的坐標與所述平面坐標之間的距離最小，所述關鍵點擬合結果中的關鍵點的擬合深度與所述關鍵點深度之間的差值最小。