[發(fā)明專利]一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互裝置及其方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202210369738.X
• 申請(qǐng)日: 2022-04-08
• 公開（公告）號(hào): CN114816052A
• 公開（公告）日: 2022-07-29
• 發(fā)明（設(shè)計(jì)）人: 王鴻智;陳陽;葉林俊
• 申請(qǐng)（專利權(quán)）人: 冠捷顯示科技（廈門）有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01
• 代理公司: 福州君誠(chéng)知識(shí)產(chǎn)權(quán)代理有限公司 35211
• 代理人: 彭東

1.一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互裝置，其特征在于：其包括VR眼鏡、顯示設(shè)備和云服務(wù)器，VR眼鏡和顯示設(shè)備通過網(wǎng)絡(luò)與云服務(wù)器連接，構(gòu)成顯示設(shè)備與元宇宙交互控制系統(tǒng)，VR眼鏡與云服務(wù)器通信交互，云服務(wù)器的操作系統(tǒng)上安裝并運(yùn)行有VR眼鏡在線監(jiān)控系統(tǒng)的服務(wù)端交互系統(tǒng)軟件，VR眼鏡與顯示設(shè)備通過云服務(wù)器的交互系統(tǒng)的交互接口實(shí)現(xiàn)數(shù)據(jù)交互；

顯示設(shè)備與云服務(wù)器通信交互，云服務(wù)器操作系統(tǒng)上安裝并運(yùn)行有顯示設(shè)備在線監(jiān)控系統(tǒng)的服務(wù)端軟件，顯示設(shè)備上安裝并運(yùn)行有在線監(jiān)控系統(tǒng)的用戶端軟件，通過顯示設(shè)備在線監(jiān)控系統(tǒng)用戶端軟件與運(yùn)行在云服務(wù)器上的顯示設(shè)備在線監(jiān)控系統(tǒng)服務(wù)端軟件進(jìn)行相互之間的通信交互；

VR眼鏡接入云服務(wù)器的交互系統(tǒng)并通過VR眼鏡操作控制顯示設(shè)備更新顯示內(nèi)容，進(jìn)而通過云服務(wù)器交互再更新到實(shí)體顯示設(shè)備和其它虛擬設(shè)備。

2.根據(jù)權(quán)利要求1所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互裝置，其特征在于：顯示設(shè)備是接入交互系統(tǒng)的實(shí)體顯示設(shè)備或者是云服務(wù)器的虛擬顯示設(shè)備。

3.根據(jù)權(quán)利要求1所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互裝置，其特征在于：沒有在現(xiàn)場(chǎng)的參與者通過佩戴VR眼鏡，以呈現(xiàn)虛擬的顯示設(shè)備和其它參與者畫面。

4.一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互方法，采用根據(jù)權(quán)利要求1至3任一項(xiàng)所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互裝置，其特征在于：方法包括以下步驟：

步驟1，云服務(wù)器的交互系統(tǒng)建立獨(dú)立的、獨(dú)特的數(shù)字人身份，現(xiàn)實(shí)世界的用戶在數(shù)字世界中擁有一個(gè)角色身份；

步驟2，用戶通過戴上VR眼鏡以角色身份登入交互系統(tǒng)，并連接顯示設(shè)備以及其它登入交互系統(tǒng)的每個(gè)角色；

步驟3，通過顯示設(shè)備在線監(jiān)控系統(tǒng)用戶端軟件與運(yùn)行在云服務(wù)器上的顯示設(shè)備在線監(jiān)控系統(tǒng)服務(wù)端軟件進(jìn)行相互之間的通信交互；

步驟4，用戶進(jìn)行顯示設(shè)備的操作控制，云服務(wù)器的交互系統(tǒng)更新顯示內(nèi)容，傳送給進(jìn)入會(huì)議的各個(gè)角色進(jìn)行信息同步。

5.根據(jù)權(quán)利要求4所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互方法，其特征在于：步驟2中多個(gè)角色以虛擬分身的方式進(jìn)入交互系統(tǒng)，與顯示設(shè)備組成由計(jì)算機(jī)模擬與真實(shí)世界平行的虛擬空間，展開創(chuàng)造活動(dòng)。

6.根據(jù)權(quán)利要求4所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互方法，其特征在于：步驟4中通過用戶通過手勢(shì)操作對(duì)顯示設(shè)備進(jìn)行操作控制，操作控制包括點(diǎn)擊或滑動(dòng)等。

7.根據(jù)權(quán)利要求4所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互方法，其特征在于：步驟4中經(jīng)由云服務(wù)器的交互系統(tǒng)與顯示設(shè)備進(jìn)行交互式的會(huì)議協(xié)作；會(huì)議內(nèi)容研討時(shí)，虛擬化用戶在顯示設(shè)備上直接操作，讓用戶具有身臨其境的感官體驗(yàn)。

8.根據(jù)權(quán)利要求7所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互方法，其特征在于：會(huì)議內(nèi)容研討對(duì)文件的操作包括編輯、注釋、保存。

9.根據(jù)權(quán)利要求4所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互方法，其特征在于：當(dāng)通過VR眼鏡操作控制實(shí)體顯示設(shè)備的具體步驟如下：

步驟4-1-1，用戶通過VR眼鏡在觀看實(shí)體顯示設(shè)備時(shí)，獲取通過用戶手勢(shì)、投射在實(shí)體顯示設(shè)備上的位置，并轉(zhuǎn)換為對(duì)顯示設(shè)備某個(gè)位置的點(diǎn)擊或滑動(dòng)控制；

步驟4-1-2，實(shí)體顯示設(shè)備根據(jù)位置的點(diǎn)擊或滑動(dòng)控制進(jìn)行相應(yīng)的響應(yīng)及更新顯示內(nèi)容；

步驟4-1-3，實(shí)體顯示設(shè)備將更新的內(nèi)容直接傳送給云服務(wù)器的交互系統(tǒng)；

步驟4-1-4，由云服務(wù)器的交互系統(tǒng)將內(nèi)容轉(zhuǎn)發(fā)同步給登入交互系統(tǒng)的每個(gè)角色。

10.根據(jù)權(quán)利要求4所述的一種元宇宙系統(tǒng)中顯示設(shè)備的人機(jī)交互方法，其特征在于：當(dāng)通過VR眼鏡操作控制虛擬顯示設(shè)備的具體步驟如下：

步驟4-2-1，通過VR眼鏡觀看云服務(wù)器提供的虛擬顯示設(shè)備；

步驟4-2-2，獲取用戶手勢(shì)、投射在虛擬顯示設(shè)備上的位置并轉(zhuǎn)換為控制指令信息，控制指令包括位置和動(dòng)作兩個(gè)信息；

步驟4-2-3，通過互聯(lián)網(wǎng)將控制指令信息傳送給云服務(wù)器的交互系統(tǒng)；

步驟4-2-4，由云服務(wù)器的交互系統(tǒng)接收控制指令進(jìn)行信息更新處理顯示內(nèi)容后，再傳輸給登入交互系統(tǒng)的每個(gè)角色以進(jìn)行信息同步；

步驟4-2-5，同時(shí)云服務(wù)器的交互系統(tǒng)將更新處理顯示內(nèi)容同步到虛擬顯示設(shè)備。