[發明專利]一種互動拍攝方法、裝置、電子設備及存儲介質

在審

• 申請號: 202010521090.4
• 申請日: 2020-06-10
• 公開（公告）號: CN111640198A
• 公開（公告）日: 2020-09-08
• 發明（設計）人: 王子彬;孫紅亮;李炳澤
• 申請（專利權）人: 上海商湯智能科技有限公司
• 主分類號: G06T19/00
• 分類號: G06T19/00;G06K9/00;G06K9/62
• 代理公司: 北京中知法苑知識產權代理有限公司 11226
• 代理人: 李明;趙吉陽

1.一種互動拍攝方法，其特征在于，所述方法包括：

獲取包括現實人物的多張用戶圖像；

基于獲取的所述多張用戶圖像，識別所述現實人物的人物肢體動作信息；

根據識別的所述人物肢體動作信息，確定虛擬動物在虛擬場景中對應的動物肢體動作信息；

基于所述現實人物的人物肢體動作信息、以及所述虛擬動物在虛擬場景中對應的動物肢體動作信息，生成所述現實人物融入所述虛擬場景后的AR場景畫面。

2.根據權利要求1所述的方法，其特征在于，根據識別的所述人物肢體動作信息，確定虛擬動物在虛擬場景中對應的動物肢體動作信息，包括：

根據識別的所述人物肢體動作信息，確定所述虛擬動物在虛擬場景中與人物肢體動作相配合的動物肢體動作信息。

3.根據權利要求2所述的方法，其特征在于，根據識別的所述人物肢體動作信息，確定所述虛擬動物在虛擬場景中與人物肢體動作相配合的動物肢體動作信息，包括：

獲取各個預設人物肢體動作信息和各個預設動物肢體動作信息之間的預設匹配關系；

基于獲取的所述預設匹配關系，確定與識別出的所述人物肢體動作信息匹配的預設動物肢體動作信息；

將確定出的預設動物肢體動作信息，作為所述虛擬動物在虛擬場景中與人物肢體動作相配合的動物肢體動作信息。

4.根據權利要求1～3任一所述的方法，其特征在于，生成所述現實人物融入所述虛擬場景后的AR場景畫面之后，還包括：

通過部署在所述現實人物前方的顯示屏展示所述AR場景畫面。

5.根據權利要求4所述的方法，其特征在于，基于所述現實人物的人物肢體動作信息、以及所述虛擬動物在虛擬場景中對應的動物肢體動作信息，生成所述現實人物融入所述虛擬場景后的AR場景畫面，包括：

基于獲取的所述用戶圖像，確定所述現實人物與所述顯示屏之間的相對位置信息；

基于所述相對位置信息，確定所述現實人物在所述AR場景畫面中的位置信息；

基于所述現實人物在所述AR場景畫面中的位置信息、所述現實人物的人物肢體動作信息、以及所述虛擬動物在虛擬場景中對應的動物肢體動作信息，生成所述AR場景畫面。

6.根據權利要求1～5任一所述的方法，其特征在于，按照如下步驟在虛擬場景中顯示所述虛擬動物：

在基于獲取的所述場景圖像，確定所述現實人物發出虛擬動物召喚指令之后，在虛擬場景中顯示所述虛擬動物。

7.根據權利要求1～6任一所述的方法，其特征在于，所述現實人物為多個；根據識別的所述人物肢體動作信息，確定虛擬動物在虛擬場景中對應的動物肢體動作信息，包括：

根據多個所述現實人物中每個所述現實人物的人物肢體動作信息，確定對應的人物肢體組合動作信息；

基于確定的所述人物肢體組合動作信息，確定虛擬動物在虛擬場景中對應的動物肢體動作信息。

8.根據權利要求1～7任一所述的方法，其特征在于，所述基于獲取的所述多張用戶圖像，識別所述現實人物的人物肢體動作信息，包括：

在基于獲取的所述多種場景圖像，確定該場景圖像中存在現實人物時，利用訓練完成的肢體動作識別網絡對所述多張場景圖像進行肢體動作識別，得到所述現實人物的人物肢體動作信息。

9.一種互動拍攝裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取包括現實人物的多張用戶圖像；

識別模塊，用于基于獲取的所述多張用戶圖像，識別所述現實人物的人物肢體動作信息；

確定模塊，用于根據識別的所述人物肢體動作信息，確定虛擬動物在虛擬場景中對應的動物肢體動作信息；

生成模塊，用于基于所述現實人物的人物肢體動作信息、以及所述虛擬動物在虛擬場景中對應的動物肢體動作信息，生成所述現實人物融入所述虛擬場景后的AR場景畫面。