[發(fā)明專利]一種虛擬顯示裝置、智能交互方法和云端服務(wù)器

在審

• 申請(qǐng)?zhí)枺?/td>: 201780003281.8
• 申請(qǐng)日: 2017-08-11
• 公開（公告）號(hào): CN108401463A
• 公開（公告）日: 2018-08-14
• 發(fā)明（設(shè)計(jì)）人: 廉士國(guó);王愷;林義閩;劉兆祥
• 申請(qǐng)（專利權(quán)）人: 深圳前海達(dá)闥云端智能科技有限公司
• 主分類號(hào): G06T19/00
• 分類號(hào): G06T19/00;G06F3/01
• 代理公司: 深圳市愛迪森知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44341
• 代理人: 何婷

一種虛擬顯示裝置，可與第二虛擬顯示裝置以及交互端通信，該虛擬顯示裝置包括接收模塊、無(wú)線連接模塊以及顯示模塊，該接收模塊用于接收用戶指定的三維顯示位置以及用于獲取第二虛擬顯示裝置的屏顯內(nèi)容；該顯示模塊用于根據(jù)該三維顯示位置確定虛擬窗口，并在該虛擬窗口中顯示該第二虛擬顯示裝置的屏顯內(nèi)容；該無(wú)線連接模塊用于獲取該交互端對(duì)該屏顯內(nèi)容的交互操作指令；該述顯示模塊還用于在該虛擬窗口顯示該第二虛擬顯示裝置反饋的響應(yīng)該交互操作指令更新的屏顯內(nèi)容。

技術(shù)領(lǐng)域

本申請(qǐng)涉及增強(qiáng)現(xiàn)實(shí)(Mixed reality,MR)領(lǐng)域，具體涉及一種虛擬顯示裝置、智能交互方法和云端服務(wù)器。

背景技術(shù)

隨著網(wǎng)絡(luò)技術(shù)的發(fā)展，圖像處理技術(shù)以及大數(shù)據(jù)處理能力的提升，可穿戴虛擬現(xiàn)實(shí)設(shè)備得到用戶越來(lái)越多的青睞。

同時(shí)隨著智能終端和物聯(lián)網(wǎng)技術(shù)的快速發(fā)展，人們使用的智能設(shè)備越來(lái)越多，尤其是帶有顯示屏幕的智能終端設(shè)備，例如電腦、智能手機(jī)、智能電視等。

目前的智能穿戴式顯示設(shè)備，比如虛擬現(xiàn)實(shí)(VR)設(shè)備、增強(qiáng)現(xiàn)實(shí)(AR)設(shè)備如何整合現(xiàn)有的帶顯示屏幕的智能終端設(shè)備成為亟待解決的問(wèn)題，增強(qiáng)現(xiàn)實(shí)技術(shù)(AugmentedReality，簡(jiǎn)稱AR)，是一種實(shí)時(shí)地計(jì)算圖像或者影像的位置及角度并加上相應(yīng)圖像、視頻、3D模型技術(shù)，AR技術(shù)的目標(biāo)是在屏幕上把虛擬世界增加至現(xiàn)實(shí)世界并進(jìn)行互動(dòng)。例如，微軟HoloLens智能眼鏡的功能展示中呈現(xiàn)出的增強(qiáng)現(xiàn)實(shí)場(chǎng)景：人戴著HoloLens眼鏡可以看到地面上站著一個(gè)虛擬人、墻上貼著一幅虛擬畫。在這些場(chǎng)景中，智能眼鏡可實(shí)現(xiàn)對(duì)任意數(shù)字畫面的顯示，但要融合當(dāng)前不同功能的智能終端還有難度，一方面是顯示的位置要逼真、貼切，另一方面是要支持自然的交互方式。傳統(tǒng)智能終端的屏幕有不同的尺寸，位置符合人的使用習(xí)慣，不能一直出現(xiàn)以固定尺寸在人眼視線的正中央；并且，目前的虛擬現(xiàn)實(shí)(VR)設(shè)備、增強(qiáng)現(xiàn)實(shí)(AR)設(shè)備一般使用空間手勢(shì)來(lái)操控，不適用于對(duì)精度要求高的一些智能終端設(shè)備內(nèi)容操作，而且在沒有力反饋的情況下很容易出現(xiàn)手臂疲勞。

中國(guó)專利申請(qǐng)第201611160770.8號(hào)披露了一種應(yīng)用于視頻AR的顯示系統(tǒng)，通過(guò)戶上傳自定義的原始視頻生成模型視頻與預(yù)置的三維場(chǎng)景模型結(jié)合通過(guò)AR顯示，三維虛實(shí)結(jié)合的顯示場(chǎng)景與用戶照片結(jié)合，同時(shí)用戶可以自定義自己的AR顯示場(chǎng)景，實(shí)現(xiàn)了用戶自己定制AR場(chǎng)景的視頻。

但是，目前的虛擬現(xiàn)實(shí)(VR)設(shè)備、增強(qiáng)現(xiàn)實(shí)(AR)設(shè)備還沒有做到與傳統(tǒng)的帶顯示屏幕的智能終端融合，無(wú)法提供更多樣化的AR體驗(yàn)。

因此，現(xiàn)有的智能穿戴顯示技術(shù)還有待于改進(jìn)。

發(fā)明內(nèi)容

本申請(qǐng)?zhí)峁┮环N結(jié)合可穿戴智能顯示設(shè)備和傳統(tǒng)交互工具整合各種傳統(tǒng)智能終端功能的虛擬顯示裝置、智能交互方法和設(shè)備，把傳統(tǒng)智能終端的屏幕統(tǒng)一起來(lái)，在虛擬顯示裝置上自適應(yīng)顯示和交互，或者在不同虛擬顯示裝置上同步自適應(yīng)顯示和交互。

第一方面，從虛擬顯示終端角度闡述，本申請(qǐng)實(shí)施例提供了一種虛擬顯示裝置，可與第二虛擬顯示裝置以及交互端通信，該虛擬顯示裝置包括接收模塊、無(wú)線連接模塊以及顯示模塊，

該接收模塊用于接收用戶指定的三維顯示位置以及用于獲取第二虛擬顯示裝置的屏顯內(nèi)容；

該顯示模塊用于根據(jù)該三維顯示位置確定虛擬窗口，并在該虛擬窗口中顯示該第二虛擬顯示裝置的屏顯內(nèi)容；

該接收模塊還用于獲取該交互端對(duì)該屏顯內(nèi)容的交互操作指令；

該顯示模塊還用于在該虛擬窗口顯示該第二虛擬顯示裝置反饋的響應(yīng)該交互操作指令更新的屏顯內(nèi)容。

第二方面，從虛擬顯示終端處理流程闡述，本申請(qǐng)實(shí)施例提供了一種智能交互方法，

虛擬顯示裝置接收用戶指定的三維顯示位置，獲取第二虛擬顯示裝置的屏顯內(nèi)容；