[發明專利]用于三維視覺與環境交互的系統架構、方法及電子設備

在審

• 申請號: 202211193196.1
• 申請日: 2022-09-28
• 公開（公告）號: CN115731368A
• 公開（公告）日: 2023-03-03
• 發明（設計）人: 王靜逸;邢磊;舒展;李俊杰;張國超;蔡娟;曹巖;唐景峰;張術芬;張鶴苧;張俊
• 申請（專利權）人: 中國建設銀行股份有限公司;建信金融科技有限責任公司
• 主分類號: G06T19/00
• 分類號: G06T19/00
• 代理公司: 上海華誠知識產權代理有限公司 31300
• 代理人: 徐樂樂

1.一種用于三維視覺與環境交互的系統架構，其特征在于，包括：

業務應用層，所述業務應用層包括系統交互模塊，所述系統交互模塊包括基于視覺射線交互模塊和基于三維世界物體對象交互模塊；

功能管理組件層，所述功能管理組件層包括碰撞檢測管理模塊和UI系統狀態機管理模塊，所述碰撞檢測管理模塊用于檢測UI發射器所發射的UI發射對象和UI碰撞對象之間的碰撞，所述UI系統狀態機管理模塊用于檢測和控制UI交互對象狀態，所述UI交互對象狀態包括按下、彈起、點擊、拖動、選定、取消選定、自定義及滑動中的一種或多種；

系統管理層，所述系統管理層包括UI系統管理與監聽模塊，UI系統管理與監聽模塊用于基于業務應用層的所述系統交互模塊，生成所述UI交互對象，且用于監聽和調度所述功能管理組件層中所述碰撞檢測管理模塊和所述UI系統狀態機管理模塊，以根據用戶操作，通過所述碰撞檢測管理模塊檢測UI發射對象和UI碰撞對象之間的碰撞，并通過所述UI系統狀態機管理模塊改變所述UI交互對象的狀態，從而實現三維視覺與環境的交互。

2.根據權利要求1所述的用于三維視覺與環境交互的系統架構，其特征在于，還包括：

UI功能組件層，所述UI功能組件層包括UI系統套件，用于生成UI交互對象，且定義所述UI交互對象的狀態，

所述UI系統管理與監聽模塊通過所述UI系統套件生成所述UI交互對象，所述UI系統管理機狀態管理模塊通過所述UI系統套件改變所述UI交互對象的狀態。

3.根據權利要求2所述的用于三維視覺與環境交互的系統架構，其特征在于，所述UI系統套件中的UI組件包括UI按鈕、UI計時器、復選框、容器、滑動框、滾屏拖動組件、消息彈窗中的系統套件框架及自定義組件。

4.根據權利要求2所述的用于三維視覺與環境交互的系統架構，其特征在于，所述系統管理層還包括：

UI渲染組件，用于渲染所述UI組件；

外設管理器模塊，用于管理外設設備的軟件開發工具包和通信協議信號。

5.根據權利要求4所述的用于三維視覺與環境交互的系統架構，其特征在于，還包括：

底層庫，所述底層庫包括圖形渲染引擎模塊、VR設備驅動模塊及外設驅動模塊。

6.根據權利要求1所述的用于三維視覺與環境交互的系統架構，其特征在于，所述UI系統狀態機管理模塊還用于對所述UI發射對象和UI碰撞對象之間的碰撞進行計時。

7.一種基于權利要求1至6任一所述的用于三維視覺與環境交互的系統架構的三維視覺與環境交互的方法，其特征在于，包括：

步驟S1，UI系統管理與監聽模塊基于業務應用層的系統交互模塊中的應用實例，生成UI交互對象，注冊UI發射器、UI發射對象、UI碰撞對象、所述UI發射對象和所述UI碰撞對象的碰撞信息及所述UI交互對象的狀態信息；

步驟S2，所述UI系統管理與監聽模塊監聽及調度所述碰撞檢測管理模塊和所述UI系統狀態機管理模塊，觸發所述UI交互對象的狀態響應；

步驟S3，所述UI系統管理與監聽模塊基于用戶操作，改變所述UI交互對象的狀態，從而實現三維視覺與環境交互。

8.根據權利要求7所述的方法，其特征在于，所述步驟S2包括：

步驟S21，所述UI系統管理與監聽模塊激活所述UI發射器，調度所述碰撞檢測管理模塊；

步驟S22，所述碰撞檢測管理模塊檢測所述UI發射對象和所述UI碰撞對象的碰撞情況，并將所述碰撞情況反饋至所述UI系統管理與監聽模塊；

步驟S23，所述UI系統管理與監聽模塊在所述碰撞情況滿足所述碰撞信息時，觸發所述UI交互對象的狀態響應。