[發明專利]模板化編輯的虛擬內容在MR/AR頭戴設備中交互呈現方法

在審

• 申請號: 202210645714.2
• 申請日: 2022-06-08
• 公開（公告）號: CN114860084A
• 公開（公告）日: 2022-08-05
• 發明（設計）人: 劉玉婷;溫曉晴
• 申請（專利權）人: 廣東技術師范大學;深圳迪樂普數碼科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 深圳市精英專利事務所 44242
• 代理人: 李燕娥

本發明公開了模板化編輯的虛擬內容在MR/AR頭戴設備中交互呈現方法，方法包括：將媒體素材添加至以相對坐標系建立的三維虛擬空間采用模板化編輯制作生成虛擬仿真內容；在某個實景中初次使用該虛擬仿真內容時識別實景圖像的特定標記物建立絕對坐標系，并得到虛擬物體在絕對坐標系的校正參數；根據虛擬物體生成對應實景物體的掩膜，結合校正參數生成與實景對應的渲染圖像，獲取手柄按鍵信號并進行模板內容的交互操作，渲染圖像輸出至頭戴設備的顯示器進行顯示。本發明屬于VR/AR技術領域，通過校正參數對虛擬仿真內容進行位置和姿態校正，通過生成掩膜對實景圖像進行分割以生成渲染圖像，大幅提高了虛擬仿真內容的制作效率。

技術領域

本發明涉及VR/AR技術領域，尤其涉及一種模板化編輯的虛擬內容在MR/AR頭戴設備中交互呈現方法。

背景技術

隨著虛擬現實技術的逐步發展，虛擬現實技術逐漸應用到越來越多的智能設備中，如在MR(混合現實，Mixed Reality)設備中可對虛擬仿真內容進行逼真地呈現。然而，現有的MR設備在對虛擬仿真內容進行制作時，通常需要先對實景中的實際物體進行坐標及尺寸的測量，再根據測量數據進行虛擬場景搭建、虛擬物體建模制作等過程，并最終制作得到可進行呈現的虛擬仿真內容。現有技術方法中制作虛擬仿真內容并進行呈現的技術方法，需要對各種實際物體進行測量，因此導致制作過程較為繁瑣，影響了虛擬仿真內容制作的效率。因此，現有的技術方法存在無法高效制作得到可在MR設備中進行呈現的虛擬仿真內容的問題。

發明內容

本發明實施例提供了一種模板化編輯的虛擬內容在MR/AR頭戴設備中交互呈現方法、裝置、設備及介質，旨在解決現有技術方法中所存在的無法高效制作得到可在MR設備中進行呈現的虛擬仿真內容的問題。

第一方面，本發明實施例提供了一種模板化編輯的虛擬內容在MR/AR頭戴設備中交互呈現方法，所述方法包括：

采用相對坐標系構建三維虛擬空間，根據預置參數值將媒體素材添加至該三維虛擬空間中，并采用模板化編輯制作生成虛擬仿真內容；

獲取所述頭戴設備的第一位置姿態信息及所述手柄的第二位置姿態信息；

根據所述第一位置姿態信息識別實景圖像中的特定標記物建立絕對坐標系，并匹配所述虛擬仿真內容中相應虛擬物體，得到校正參數，實現絕對坐標構建的三維虛擬空間的虛擬仿真；

針對所述實景圖像中的實景物體構建對應的虛擬物體，調整虛擬物體的位置、姿態及大小以匹配實景物體，從而生成實景物體的對應的掩膜，進而實現虛擬物體和實景物體的穿越遮擋；

獲取所述手柄輸入的手柄按鍵信息并根據所述第二位置姿態信息，通過虛擬仿真模板參數及虛擬仿真內容參數對所述手柄按鍵信息進行邏輯判斷，得到對應的邏輯判斷結果；

根據所述校正參數、所述虛擬仿真內容、所述虛擬仿真模板參數及所述掩膜生成的虛擬場景與所述實景圖像疊加生成最終渲染圖像并輸出至所述頭戴設備的顯示器進行顯示。

第二方面，本發明實施例提供了一種模板化編輯的虛擬內容在MR/AR頭戴設備中交互呈現裝置，其包括：

虛擬仿真內容生成單元，用于采用相對坐標系構建三維虛擬空間，根據預置參數值將媒體素材添加至該三維虛擬空間中，并采用模板化編輯制作生成虛擬仿真內容；

姿態位置信息獲取單元，用于獲取所述頭戴設備的第一位置姿態信息及所述手柄的第二位置姿態信息；

校正參數獲取單元，用于根據所述第一位置姿態信息識別實景圖像中的特定標記物建立絕對坐標系，并匹配所述虛擬仿真內容中相應虛擬物體，得到校正參數，實現絕對坐標構建的三維虛擬空間的虛擬仿真；

掩膜生成單元，用于針對所述實景圖像中的實景物體構建對應的虛擬物體，調整虛擬物體的位置、姿態及大小以匹配實景物體，從而生成實景物體的對應的掩膜，進而實現虛擬物體和實景物體的穿越遮擋；