[發明專利]一種虛擬對象的控制方法、裝置、電子設備及存儲介質

在審

• 申請號: 202010525221.6
• 申請日: 2020-06-10
• 公開（公告）號: CN111652985A
• 公開（公告）日: 2020-09-11
• 發明（設計）人: 王子彬;孫紅亮;李炳澤
• 申請（專利權）人: 上海商湯智能科技有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06T13/40;G06K9/00
• 代理公司: 北京中知法苑知識產權代理有限公司 11226
• 代理人: 李明;趙吉陽

1.一種虛擬對象的控制方法，其特征在于，所述方法包括：

獲取包括多個現實人物的真實場景圖像；

從獲取的所述真實場景圖像中，提取與所述多個現實人物對應的人流分布信息；

基于提取的所述人流分布信息，確定虛擬對象在虛擬場景中的動作執行信息；

基于所述真實場景圖像中所述多個現實人物的圖像、以及所述虛擬對象在虛擬場景中的動作執行信息，生成所述多個現實人物融入所述虛擬場景后的AR動畫特效。

2.根據權利要求1所述的方法，其特征在于，所述人流分布信息包括人流密集度；所述基于提取的所述人流分布信息，確定虛擬對象在虛擬場景中的動作執行信息，包括：

在提取的所述人流密集度大于或等于預設密集度的情況下，生成控制所述虛擬對象在待生成的AR動畫特效中避開所述多個現實人物的動作執行信息；

在提取的所述人流密集度小于預設密集度的情況下，生成控制所述虛擬對象在待生成的AR動畫特效中靠近所述多個現實人物的動作執行信息。

3.根據權利要求1所述的方法，其特征在于，所述人流分布信息包括人員位置分布信息；所述基于提取的所述人流分布信息，確定虛擬對象在虛擬場景中的動作執行信息，包括：

基于提取的與所述多個現實人物對應的人員位置分布信息，確定所述多個現實人物在所述待生成的AR動畫特效中對應的現實位置范圍信息；

若所述現實位置范圍信息所指示的現實位置范圍大于或等于預設范圍，則生成控制所述虛擬對象出現在所述現實位置范圍內的第一動作執行信息；

若所述現實位置范圍信息所指示的現實位置范圍小于預設范圍，則生成控制所述虛擬對象走向所述現實位置范圍的第二動作執行信息。

4.根據權利要求1～3任一所述的方法，其特征在于，所述基于所述真實場景圖像中所述多個現實人物的圖像、以及所述虛擬對象在虛擬場景中的動作執行信息，生成所述多個現實人物融入所述虛擬場景后的AR動畫特效，包括：

基于各動作執行信息與各運動軌跡數據之間的對應關系，確定與虛擬對象在虛擬場景中的動作執行信息對應的運動軌跡數據；

基于所述真實場景圖像中所述多個現實人物的圖像、所述虛擬對象在虛擬場景中的動作執行信息、以及對應的所述運動軌跡數據，生成所述多個現實人物融入所述虛擬場景后的AR動畫特效。

5.根據權利要求1～4任一所述的方法，其特征在于，所述從獲取的所述真實場景圖像中，提取與所述多個現實人物對應的人流分布信息，包括：

利用預先訓練好的人流信息提取網絡對獲取的所述真實場景圖像進行人流信息提取，得到與所述多個現實人物對應的人流密度的分布特征，將該人流密度的分布特征作為所述人流分布信息。

6.一種虛擬對象的控制裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取包括多個現實人物的真實場景圖像；

提取模塊，用于從獲取的所述真實場景圖像中，提取與所述多個現實人物對應的人流分布信息；

確定模塊，用于基于提取的所述人流分布信息，確定虛擬對象在虛擬場景中的動作執行信息；

生成模塊，用于基于所述真實場景圖像中所述多個現實人物的圖像、以及所述虛擬對象在虛擬場景中的動作執行信息，生成所述多個現實人物融入所述虛擬場景后的AR動畫特效。

7.根據權利要求6所述的裝置，其特征在于，所述人流分布信息包括人流密集度；所述確定模塊，用于按照以下步驟基于提取的所述人流分布信息，確定虛擬對象在虛擬場景中的動作執行信息：

在提取的所述人流密集度大于或等于預設密集度的情況下，生成控制所述虛擬對象在待生成的AR動畫特效中避開所述多個現實人物的動作執行信息；

在提取的所述人流密集度小于預設密集度的情況下，生成控制所述虛擬對象在待生成的AR動畫特效中靠近所述多個現實人物的動作執行信息。