[發(fā)明專利]基于眼部識(shí)別的VR控制方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201710677903.7
• 申請(qǐng)日: 2017-08-09
• 公開（公告）號(hào): CN107450727A
• 公開（公告）日: 2017-12-08
• 發(fā)明（設(shè)計(jì)）人: 喬連偉
• 申請(qǐng)（專利權(quán)）人: 上海聞泰電子科技有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01
• 代理公司: 北京超凡志成知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙)11371
• 代理人: 王術(shù)蘭

技術(shù)領(lǐng)域

本發(fā)明涉及虛擬現(xiàn)實(shí)技術(shù)領(lǐng)域，尤其涉及基于眼部識(shí)別的VR控制方法及裝置。

背景技術(shù)

虛擬現(xiàn)實(shí)技術(shù)(英文全稱為Virtual Reality，英文簡(jiǎn)稱為VR)是一種可以創(chuàng)建和體驗(yàn)虛擬世界的計(jì)算機(jī)仿真系統(tǒng)。虛擬現(xiàn)實(shí)技術(shù)利用計(jì)算機(jī)生成一種模擬環(huán)境，即一種三維動(dòng)態(tài)視景和實(shí)體行為的仿真系統(tǒng)，能夠使用戶沉浸到其中。虛擬現(xiàn)實(shí)技術(shù)主要包括模擬環(huán)境、感知、自然技能和傳感設(shè)備等方面，參與者運(yùn)用頭部、眼睛、手勢(shì)或者其他參與者體行為動(dòng)作來向VR設(shè)備發(fā)出響應(yīng)，并能獲得VR設(shè)備反射回來的虛擬畫面場(chǎng)景，并且，參與者們能感覺到自己置身于虛擬畫面場(chǎng)景之中。甚至，有些VR設(shè)備還包括嗅覺和味覺等，由計(jì)算機(jī)來處理與參與者的動(dòng)作相適應(yīng)的數(shù)據(jù)，并將相關(guān)結(jié)果反饋到參與者的五官。

目前，常用的VR一體機(jī)中包括顯示屏幕、虛擬現(xiàn)實(shí)頭套、VR處理器和虛擬手柄，在使用時(shí)，參與者先要佩戴上虛擬現(xiàn)實(shí)頭套，之后，參與者能看到在VR處理器處理后得到的在顯示屏上的視覺圖像，并且，參與者能感覺到自己沉浸在其中。另外，參與者還能夠通過虛擬手柄向VR處理器進(jìn)一步輸入信號(hào)，進(jìn)而通過虛擬現(xiàn)實(shí)頭套得到相關(guān)的“發(fā)生在眼前”的場(chǎng)景。但是，隨著VR技術(shù)的不斷發(fā)展，參與者對(duì)體驗(yàn)要求越來越高，傳統(tǒng)的通過虛擬手柄發(fā)送信號(hào)的傳輸方式會(huì)使參與者感覺很累，并且，參與者在運(yùn)動(dòng)過程中發(fā)送的信號(hào)常常因?yàn)椴粔驕?zhǔn)確而影響體驗(yàn)效果。

綜上，目前關(guān)于VR設(shè)備中要依賴虛擬手柄等才能實(shí)現(xiàn)信號(hào)傳輸?shù)膯栴}，尚無有效的解決辦法。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明實(shí)施例的目的在于提供了基于眼部識(shí)別的VR控制方法及裝置，通過設(shè)置攝像頭來采集參與者的眼部狀態(tài)等，方便輕松的實(shí)現(xiàn)了對(duì)VR設(shè)備的進(jìn)一步的信號(hào)輸入，從而提升了用戶體驗(yàn)。

第一方面，本發(fā)明實(shí)施例提供了基于眼部識(shí)別的VR控制方法，包括：攝像頭實(shí)時(shí)獲取參與者的眼部狀態(tài)，其中，攝像頭安裝在顯示屏幕上；

VR處理器將眼部狀態(tài)識(shí)別為不同的狀態(tài)信號(hào)，且，根據(jù)不同的狀態(tài)信號(hào)生成不同的場(chǎng)景信號(hào)；

顯示屏幕將場(chǎng)景信號(hào)對(duì)應(yīng)的場(chǎng)景畫面進(jìn)行顯示。

結(jié)合第一方面，本發(fā)明實(shí)施例提供了第一方面的第一種可能的實(shí)施方式，其中，攝像頭實(shí)時(shí)獲取參與者的眼部狀態(tài)包括：

攝像頭實(shí)時(shí)獲取參與者的左眼狀態(tài)和右眼狀態(tài)；

當(dāng)參與者有多個(gè)時(shí)，攝像頭分別將左眼狀態(tài)和右眼狀態(tài)進(jìn)行統(tǒng)計(jì)，得到累計(jì)左眼狀態(tài)和累計(jì)右眼狀態(tài)；

攝像頭將累計(jì)左眼狀態(tài)和累計(jì)右眼狀態(tài)均發(fā)送給VR處理器。

結(jié)合第一方面的第一種可能的實(shí)施方式，本發(fā)明實(shí)施例提供了第一方面的第二種可能的實(shí)施方式，其中，VR處理器將眼部狀態(tài)識(shí)別為不同的狀態(tài)信號(hào)包括：

VR處理器將左眼狀態(tài)和右眼狀態(tài)均分為睜眼狀態(tài)和閉眼狀態(tài)；

VR處理器分別根據(jù)不同只眼的不同睜閉狀態(tài)生成不同的狀態(tài)信號(hào)。

結(jié)合第一方面的第二種可能的實(shí)施方式，本發(fā)明實(shí)施例提供了第一方面的第三種可能的實(shí)施方式，其中，當(dāng)參與者有多個(gè)時(shí)，攝像頭分別將左眼狀態(tài)和右眼狀態(tài)進(jìn)行統(tǒng)計(jì)，得到累計(jì)左眼狀態(tài)和累計(jì)右眼狀態(tài)包括：

當(dāng)參與者有多個(gè)時(shí)，攝像頭將拍攝范圍內(nèi)的各個(gè)參與者的左眼狀態(tài)和右眼狀態(tài)均分為睜眼狀態(tài)和閉眼狀態(tài)；

攝像頭分別統(tǒng)計(jì)左眼狀態(tài)下和右眼狀態(tài)下的睜眼狀態(tài)和閉眼狀態(tài)的個(gè)數(shù)；

當(dāng)左眼狀態(tài)下的睜眼狀態(tài)的個(gè)數(shù)大于閉眼狀態(tài)的個(gè)數(shù)時(shí)，攝像頭將累計(jì)左眼狀態(tài)記作睜眼狀態(tài)，否則，攝像頭將累計(jì)左眼狀態(tài)記作閉眼狀態(tài)；

當(dāng)右眼狀態(tài)下的睜眼狀態(tài)的個(gè)數(shù)大于閉眼狀態(tài)的個(gè)數(shù)時(shí)，攝像頭將累計(jì)右眼狀態(tài)記作睜眼狀態(tài)，否則，攝像頭將累計(jì)右眼狀態(tài)記作閉眼狀態(tài)。

結(jié)合第一方面，本發(fā)明實(shí)施例提供了第一方面的第四種可能的實(shí)施方式，其中，攝像頭安裝在顯示屏幕上端的中間位置上。

第二方面，本發(fā)明實(shí)施例提供了基于眼部識(shí)別的VR控制裝置，包括：

狀態(tài)獲取模塊，用于攝像頭實(shí)時(shí)獲取參與者的眼部狀態(tài)，其中，攝像頭安裝在顯示屏幕上；

場(chǎng)景信號(hào)生成模塊，用于VR處理器將眼部狀態(tài)識(shí)別為不同的狀態(tài)信號(hào)，且，根據(jù)不同的狀態(tài)信號(hào)生成不同的場(chǎng)景信號(hào)；

顯示模塊，用于顯示屏幕將場(chǎng)景信號(hào)對(duì)應(yīng)的場(chǎng)景畫面進(jìn)行顯示。

結(jié)合第二方面，本發(fā)明實(shí)施例提供了第二方面的第一種可能的實(shí)施方式，其中，狀態(tài)獲取模塊包括：

實(shí)時(shí)獲取單元，用于攝像頭實(shí)時(shí)獲取參與者的左眼狀態(tài)和右眼狀態(tài)；

累計(jì)單元，用于當(dāng)參與者有多個(gè)時(shí)，攝像頭分別將左眼狀態(tài)和右眼狀態(tài)進(jìn)行統(tǒng)計(jì)，得到累計(jì)左眼狀態(tài)和累計(jì)右眼狀態(tài)；