[發明專利]共享虛擬場景的交互方法及控制器、手持設備及虛擬系統

在審

• 申請號: 202210912292.0
• 申請日: 2022-07-29
• 公開（公告）號: CN115167685A
• 公開（公告）日: 2022-10-11
• 發明（設計）人: 翁志彬;周克
• 申請（專利權）人: 小派科技（上海）有限責任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T19/00
• 代理公司: 北京布瑞知識產權代理有限公司 11505
• 代理人: 李浩

本發明提供了共享虛擬場景的交互方法及控制器、手持設備及虛擬系統，解決了現有技術中當多用戶共同使用AR技術時，無法實現多用戶自由互動，從而降低了用戶的體驗感的技術問題。本發明提供的多用戶共享虛擬場景的交互方法，通過將多用戶中的任何一個用戶所處的實體環境虛擬為實體互動場景模型，多用戶共用該實體互動場景模型，并將所有用戶在實體環境中的手持設備的6DOF數據映射至該實體互動場景模型中，以增強參與者的互動及AR體驗感。將任何一個用戶所在的實體環境虛擬成實體互動場景模型，每個用戶在該實體互動場景模型中互動，從而可以使得多用戶中的每個用戶無需在一個特定的劃定好的真實場景中實現自由互動，提高了用戶的體驗感。

技術領域

本發明涉及虛擬技術領域，具體涉及共享虛擬場景的交互方法及控制器、手持設備及虛擬系統。

背景技術

增強現實技術(簡稱AR技術)，是一種可以創建和體驗虛擬世界的計算機仿真系統，它利用計算機生成一種模擬實體環境，是一種多源信息融合的、交互式的三維動態視景和實體行為的系統仿真使用戶沉浸到該實體環境中，例如可以像真實世界一樣走動，比如可以模擬雙手抓握東西等。

現有技術中，當多用戶共同使用AR技術來體驗更復雜的虛擬場景時，往往只能在特定的實體環境中進行簡單的互動，例如多用戶在設定劃定好的體驗區域內，通過AR技術在虛擬場景中進行簡單的互動。當多用戶通過AR實現虛擬互動時，多用戶無法只能在劃定好的體驗區域進行體驗，無法實現多用戶在不同的區域或者同一區域的不同位置的自由交互，從而降低了用戶的體驗感。

發明內容

有鑒于此，本發明提供了共享虛擬場景的交互方法及控制器、手持設備及虛擬系統，解決了現有技術中當多用戶共同使用AR技術來體驗更復雜的虛擬場景時，無法實現多用戶自由互動，從而降低了用戶的體驗感的技術問題。

根據本發明的一個方面，本發明提供了一種多用戶共享虛擬場景的交互方法，包括：獲取用戶所處的實體環境的實體場景信息；根據所述實體場景信息渲染生成所述用戶所在的實體環境對應的實體互動場景模型；將所述實體互動場景模型發送至與所述用戶相關的相關用戶；將與所述用戶對應的互動化身投映至所述實體互動場景模型；以及獲取所述用戶所使用的手持設備的6DOF數據，并將所述6DOF數據映射至所述實體互動場景模型。

在本發明一實施例中，獲取所述用戶所使用的手持設備的6DOF數據，包括：獲取所述用戶所使用的手持設備的IMU數據；獲取所述手持設備的空間定位圖片信息；以及根據所述空間定位圖片信息以及所述手持設備的IMU數據，獲取所述手持設備的6DOF數據。

在本發明一實施例中，根據所述空間定位圖片信息以及所述手持設備的IMU數據，獲取所述手持設備的6DOF數據，包括：當所述用戶與所述實體互動場景模型發送者所處的實體環境相同時，對所述空間定位圖片信息以及所述手持設備的IMU數據進行直接計算，生成所述手持設備的6DOF數據。

在本發明一實施例中，根據所述空間定位圖片信息以及所述手持設備的IMU數據，獲取所述手持設備的6DOF數據，包括：當所述用戶與所述實體互動場景模型發送者所處的實體環境不同時，獲取所述用戶所處的實際環境的實體場景信息并渲染生成所述用戶的實體場景的模型；根據所述用戶的實體場景的模型以及所述實體互動場景模型發送者的實體互動場景的模型，確定場景映射關系；獲取所述用戶所使用的手持設備的初始空間定位圖片信息，并根據所述場景映射關系確定所述用戶的手持設備在所述實體互動場景模型中的空間定位圖片信息；以及對所述用戶的手持設備的空間定位圖片信息以及所述用戶的手持設備的IMU數據進行計算，生成所述用戶的所述手持設備的6DOF數據。

在本發明一實施例中，獲取所述手持設備的空間定位圖片信息，包括：獲取所述手持設備的多個圖片信息；以及根據所述多個圖片信息，獲取所述手持設備的空間定位圖片信息。