[發明專利]分布式綜合集成研討廳裝置、系統、構建方法及交互方法

有效

• 申請號: 202111323598.4
• 申請日: 2021-11-09
• 公開（公告）號: CN114201042B
• 公開（公告）日: 2023-09-15
• 發明（設計）人: 常予;田鈺;蔡明春
• 申請（專利權）人: 北京電子工程總體研究所
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F30/27;G06N20/00
• 代理公司: 北京正理專利代理有限公司 11257
• 代理人: 白淑賢

1.一種分布式綜合集成研討廳裝置，其特征在于，包括：

場景信息獲取模塊，配置為實時獲取現實場景中的場景數據，并建立虛擬的環境數據庫；

虛擬環境模擬模塊，配置為基于所述環境數據庫中的場景數據獲取初始行動態勢信息，并基于所述場景數據以及初始行動態勢信息進行模擬生成虛擬現實環境；

機器學習模塊，基于所述場景數據和預存儲的學習數據進行模擬推演得到預測行動態勢信息，以使得所述虛擬環境模擬模塊根據所述預測行動態勢信息更新所述虛擬現實環境；

虛擬現實交互模塊，配置為顯示虛擬現實環境，并獲取每一用戶處于當前虛擬現實環境時根據預測行動態勢信息輸出的行動決策信息；

識別模塊，配置為獲取所述行動決策信息，獲取該行動決策信息對應的用戶所處的虛擬現實環境，以及獲取對應的用戶獲得的預測行動態勢信息以輸出識別信息，以使得機器學習模塊根據所述識別信息進行模擬推演實時更新所述預測行動態勢信息并輸出；

所述虛擬環境模擬模塊還配置為基于更新后的所述預測行動態勢信息進行模擬實時輸出虛擬現實環境；

虛擬現實交互模塊還配置為同步輸出所述虛擬環境模擬模塊更新的虛擬顯示環境至其他用戶。

2.根據權利要求1所述的綜合集成研討廳裝置，其特征在于，

虛擬環境模擬模塊，進一步配置為根據所述場景數據進行動態環境建模和生成3D圖像以得到初始行動態勢信息，并利用虛擬現實技術、增強現實技術以及全息現實技術，對所述場景數據以及初始行動態勢信息進行融合，生成模擬現實場景的虛擬現實環境。

3.根據權利要求1所述的綜合集成研討廳裝置，其特征在于，

機器學習模塊進一步配置為利用多智能體博弈對抗模型與孿生仿真平行推演模型得到預測行動態勢信息，基于所述初始行動態勢信息并融合所述場景數據、預存儲的學習數據實時更新所述虛擬現實環境；

虛擬現實交互模塊進一步配置為獲取用戶處于當前虛擬現實環境時根據預測行動態勢信息輸出的行動決策信息。

4.根據權利要求1或3所述的綜合集成研討廳裝置，其特征在于，

虛擬現實交互模塊通過獲取處于當前虛擬現實環境中的用戶的手勢指令、動作信息、面部特征以及語音信息以得到該用戶的行動決策信息。

5.根據權利要求3所述的綜合集成研討廳裝置，其特征在于，

機器學習模塊進一步配置為融合所述場景數據和所述行動決策信息以更新所述預測行動態勢信息并輸出，以使得所述虛擬環境模擬模塊更新所述虛擬現實環境；

識別模塊進一步配置為識別所述行動決策信息，并將該用戶的所述行動決策信息輸出至其他用戶以進行不同用戶間的行動決策信息交互。

6.根據權利要求1所述的綜合集成研討廳裝置，其特征在于，

所述虛擬現實交互模塊還配置為響應于當前用戶的視角指令切換當前輸出的虛擬現實環境；

和/或

所述學習數據包括：預設人工智能模型、預設機器學習模型以及預設歷史事件集；

和/或

場景數據為從圖像、語音、方位角度、位置坐標等維度實時從現實場景中獲取的。

7.一種構建如權利要求1～6中任一項所述分布式綜合集成研討廳裝置的方法，其特征在于，

實時獲取現實場景中的若干場景數據，并建立虛擬的環境數據庫；

基于所述環境數據庫中的場景數據得到初始行動態勢信息，并基于所述場景數據以及初始行動態勢信息進行模擬得到虛擬現實環境；

基于所述場景數據和預存儲的學習數據進行模擬推演得到預測行動態勢信息，以使得所述虛擬環境模擬模塊根據所述預測行動態勢信息進行更新；

獲取用戶處于當前虛擬現實環境時根據預測行動態勢信息輸出的行動決策信息；

獲取該行動決策信息對應的用戶所處的虛擬現實環境，以及獲取對應的用戶獲得的預測行動態勢信息以輸出識別信息，并根據所述識別信息進行模擬推演實時更新所述預測行動態勢信息并輸出；

基于所述更新后的所述預測行動態勢信息進行模擬實時輸出虛擬現實環境；

同步顯示更新的虛擬顯示環境至其他用戶。