[發(fā)明專利]虛擬現(xiàn)實(shí)交互方法、裝置及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201710632426.2
• 申請(qǐng)日: 2017-07-28
• 公開(kāi)（公告）號(hào): CN107479699A
• 公開(kāi)（公告）日: 2017-12-15
• 發(fā)明（設(shè)計(jì)）人: 劉爽;黃艷;肖樂(lè)天;雷添彧;劉中海;羅威;李嘉燦;許秋子
• 申請(qǐng)（專利權(quán)）人: 深圳市瑞立視多媒體科技有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06T15/00
• 代理公司: 深圳中一專利商標(biāo)事務(wù)所44237
• 代理人: 官建紅

技術(shù)領(lǐng)域

本發(fā)明屬于虛擬現(xiàn)實(shí)技術(shù)領(lǐng)域，尤其涉及一種虛擬現(xiàn)實(shí)交互方法、裝置以及系統(tǒng)。

背景技術(shù)

由于虛擬現(xiàn)實(shí)個(gè)人娛樂(lè)設(shè)備的發(fā)展以及電腦圖像處理性能的迅速發(fā)展，多人虛擬現(xiàn)實(shí)互動(dòng)或娛樂(lè)的需求也越來(lái)越迫切。

目前，現(xiàn)有的虛擬現(xiàn)實(shí)交互的基本原理是：獲取用戶的三維空間位置，然后根據(jù)用戶的三維空間位置映射至在虛擬場(chǎng)景中，以獲取用戶在虛擬場(chǎng)景中的位置信息，并根據(jù)該位置信息進(jìn)行相應(yīng)虛擬場(chǎng)景的渲染以及顯示給用戶。現(xiàn)有虛擬現(xiàn)實(shí)交互過(guò)程中，存在著交互行為不夠自然，形象，生動(dòng)等問(wèn)題，如用戶操作行為無(wú)法準(zhǔn)確反映到虛擬場(chǎng)景中。因此，有必要對(duì)現(xiàn)有的虛擬現(xiàn)實(shí)交互技術(shù)進(jìn)行改進(jìn)。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明實(shí)施例提供了一種虛擬現(xiàn)實(shí)交互方法、裝置及系統(tǒng)，旨在解決現(xiàn)有虛擬現(xiàn)實(shí)交互實(shí)現(xiàn)過(guò)程中交互行為不自然、不形象生動(dòng)等問(wèn)題。

鑒于此，本發(fā)明實(shí)施例提供了一種虛擬現(xiàn)實(shí)交互方法，用于現(xiàn)實(shí)用戶與虛擬場(chǎng)景之間的交互，包括：

接收第一用戶的第一圖像信息以及來(lái)自采集器的第一用戶的第一傳感信息，所述第一圖像信息標(biāo)識(shí)所述第一用戶在虛擬場(chǎng)景中的第一位置信息；

根據(jù)所述第一傳感信息確定所述第一用戶在虛擬場(chǎng)景中的第一用戶行為；

根據(jù)所述第一位置信息、所述第一用戶行為以及所述第一用戶的視角信息渲染虛擬場(chǎng)景并顯示給所述第一用戶。

其中，所述根據(jù)所述第一傳感信息確定所述第一用戶在虛擬場(chǎng)景中的第一用戶行為，包括：

根據(jù)所述傳感信息，識(shí)別所述第一用戶的姿態(tài)信息；

判斷所述姿態(tài)信息是否滿足預(yù)設(shè)條件；

若是，則確定所述第一用戶在虛擬場(chǎng)景中的用戶行為為所述預(yù)設(shè)條件對(duì)應(yīng)的用戶行為。

其中，所述預(yù)設(shè)條件包括：距離閾值條件，骨骼彎曲閾值條件、骨骼伸展閾值以及速度閾值條件中的至少一個(gè)。

其中，在所述接收第一圖像信息以及來(lái)自采集器的第一傳感信息之前，所述交互方法還包括：

定義所述預(yù)設(shè)條件對(duì)應(yīng)的用戶行為；

所述用戶行為包括：伸展動(dòng)作、彎曲動(dòng)作或晃動(dòng)動(dòng)作。

其中，所述接收第一圖像信息，包括：

接收所述動(dòng)捕相機(jī)采集的并通過(guò)相機(jī)服務(wù)器傳來(lái)的所述第一位置信息。

其中，當(dāng)現(xiàn)實(shí)用戶為至少兩個(gè)時(shí)，在所述根據(jù)所述第一位置信息、所述第一用戶行為以及所述第一用戶的視角信息渲染虛擬場(chǎng)景并顯示給所述第一用戶之前，所述方法還包括：

將所述第一傳感信息上傳至虛擬場(chǎng)景服務(wù)器；以及，

接收所述虛擬場(chǎng)景服務(wù)器傳來(lái)的第二用戶的第二用戶行為和第二位置信息；第二用戶行為是根據(jù)所述第二用戶的第二傳感信息確定的；

所述根據(jù)所述第一位置信息、所述第一用戶行為以及所述第一用戶的視角信息渲染虛擬場(chǎng)景并顯示給所述第一用戶，包括：

根據(jù)所述第一位置信息、第二位置信息、所述第一用戶行為、第二用戶行為以及所述第一用戶的視角信息渲染虛擬場(chǎng)景并顯示給所述第一用戶。

相應(yīng)地，本發(fā)明還提供了一種虛擬現(xiàn)實(shí)交互裝置，用于現(xiàn)實(shí)用戶與虛擬場(chǎng)景之間的交互，包括：存儲(chǔ)器、處理器以及存儲(chǔ)在所述存儲(chǔ)器中并可在所述處理器上運(yùn)行的計(jì)算機(jī)程序，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)上述任一項(xiàng)虛擬現(xiàn)實(shí)交互方法的步驟。

本發(fā)明實(shí)施例還提供了一種虛擬現(xiàn)實(shí)交互系統(tǒng)，所述系統(tǒng)包括：圖像采集裝置，采集器，客戶端以及頭盔顯示器；

所述圖像采集裝置，用于采集第一圖像信息并傳給所述客戶端；所述第一圖像信息標(biāo)識(shí)：所述第一用戶在虛擬場(chǎng)景中的第一位置信息；

所述采集器，用于采集第一用戶的第一傳感信息并傳給所述客戶端；

所述客戶端，用于根據(jù)所述第一傳感信息確定所述第一用戶在虛擬場(chǎng)景中的第一用戶行為，以及根據(jù)所述第一位置信息、所述第一用戶行為以及所述第一用戶的視角信息渲染虛擬場(chǎng)景并通過(guò)所述頭盔顯示器顯示給所述第一用戶。

其中，所述圖像采集裝置具體為光學(xué)動(dòng)捕圖像采集裝置，包括：至少兩個(gè)動(dòng)捕相機(jī)，以及相機(jī)服務(wù)器；

所述動(dòng)捕相機(jī)，用于采集所述第一用戶的第一圖像信息并傳輸給所述相機(jī)服務(wù)器；

所述相機(jī)服務(wù)器用于將所述第一圖像信息傳輸給所述客戶端。

其中，當(dāng)現(xiàn)實(shí)用戶為至少兩個(gè)時(shí)，所述系統(tǒng)還包括：虛擬場(chǎng)景服務(wù)器；