[發(fā)明專利]AR顯示畫面調(diào)節(jié)方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202110885770.9
• 申請日: 2021-08-03
• 公開（公告）號: CN113672084A
• 公開（公告）日: 2021-11-19
• 發(fā)明（設(shè)計(jì)）人: 杜文彬
• 申請（專利權(quán)）人: 歌爾光學(xué)科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/14;G06T19/00
• 代理公司: 北京鴻元知識產(chǎn)權(quán)代理有限公司 11327
• 代理人: 王迎;袁文婷

本發(fā)明提供一種AR顯示畫面控制方法及系統(tǒng)，其中的方法包括：通過AR設(shè)備獲取AR設(shè)備所在的真實(shí)環(huán)境；獲取三維虛擬場景，并通過顯示系統(tǒng)對三維虛擬場景進(jìn)行實(shí)時顯示；基于真實(shí)環(huán)境對三維虛擬場景進(jìn)行調(diào)節(jié)，并通過顯示系統(tǒng)對調(diào)節(jié)后的三維虛擬場景進(jìn)行實(shí)時顯示。利用上述發(fā)明能夠避免用戶在對真實(shí)環(huán)境的觀察需求較高時，降低三維虛擬場景的顯示程度，方便用戶對真實(shí)環(huán)境的觀察，提高用戶體驗(yàn)效果。

技術(shù)領(lǐng)域

本發(fā)明涉及增強(qiáng)現(xiàn)實(shí)技術(shù)領(lǐng)域，更為具體地，涉及一種AR顯示畫面調(diào)節(jié)方法及系統(tǒng)。

背景技術(shù)

增強(qiáng)現(xiàn)實(shí)(Augmented Reality)技術(shù)也被稱為擴(kuò)增現(xiàn)實(shí)，AR增強(qiáng)現(xiàn)實(shí)技術(shù)是促使真實(shí)世界信息和虛擬世界信息內(nèi)容之間綜合在一起的較新的技術(shù)內(nèi)容，用戶通過AR設(shè)備可以直接看到真實(shí)世界，同時AR設(shè)備將虛擬信息內(nèi)容疊加在真實(shí)世界中加以有效應(yīng)用，并且在這一過程中能夠被人類感官所感知，從而實(shí)現(xiàn)超越現(xiàn)實(shí)的感官體驗(yàn)。真實(shí)環(huán)境和虛擬物體之間重疊之后，能夠在同一個畫面以及空間中同時存在。

增強(qiáng)現(xiàn)實(shí)技術(shù)不僅能夠有效體現(xiàn)出真實(shí)世界的內(nèi)容，也能夠促使虛擬的信息內(nèi)容顯示出來，這些細(xì)膩內(nèi)容相互補(bǔ)充和疊加。在視覺化的增強(qiáng)現(xiàn)實(shí)中，用戶需要在頭盔顯示器的基礎(chǔ)上，促使真實(shí)世界能夠和電腦圖形之間重合在一起，在重合之后可以充分看到真實(shí)的世界圍繞著它。增強(qiáng)現(xiàn)實(shí)技術(shù)中主要有多媒體和三維建模以及場景融合等新的技術(shù)和手段，增強(qiáng)現(xiàn)實(shí)所提供的信息內(nèi)容和人類能夠感知的信息內(nèi)容之間存在著明顯不同。隨著AR技術(shù)的成熟，AR越來越多地應(yīng)用于各個行業(yè)，如教育、培訓(xùn)、醫(yī)療、設(shè)計(jì)、廣告等。

目前，在AR顯示圖像時，虛擬圖像與真實(shí)世界的圖像會存在重合，在AR產(chǎn)品的圖像顯示過程中，不能進(jìn)行顯示區(qū)域的控制，用戶體驗(yàn)效果不佳。

發(fā)明內(nèi)容

鑒于上述問題，本發(fā)明的目的是提供一種AR顯示畫面調(diào)節(jié)方法及系統(tǒng)，以解決現(xiàn)有AR顯示過程中存在的虛擬圖像與真實(shí)圖像相重合，不能靈活進(jìn)行顯示控制，導(dǎo)致用戶體驗(yàn)效果不佳等問題。

本發(fā)明提供的AR顯示畫面控制方法，包括：通過AR設(shè)備獲取AR設(shè)備所在的真實(shí)環(huán)境；獲取三維虛擬場景，并通過顯示系統(tǒng)對三維虛擬場景進(jìn)行實(shí)時顯示；基于真實(shí)環(huán)境對三維虛擬場景進(jìn)行調(diào)節(jié)，并通過顯示系統(tǒng)對調(diào)節(jié)后的三維虛擬場景進(jìn)行實(shí)時顯示。

此外，可選的技術(shù)方案是，基于真實(shí)環(huán)境對三維虛擬場景進(jìn)行調(diào)節(jié)的過程，包括：基于麥克風(fēng)定位系統(tǒng)實(shí)時采集真實(shí)環(huán)境中的語音信號；在采集到語音信號時，通過深度相機(jī)獲取語音信號的音源對應(yīng)的輪廓信息；基于輪廓信息對三維虛擬場景進(jìn)行調(diào)節(jié)。

此外，可選的技術(shù)方案是，獲取三維虛擬場景的過程包括：基于深度相機(jī)采集真實(shí)環(huán)境的圖像數(shù)據(jù)；基于真實(shí)環(huán)境的圖像數(shù)據(jù)獲取與真實(shí)環(huán)境的圖像數(shù)據(jù)對應(yīng)的三維虛擬場景。

此外，可選的技術(shù)方案是，在采集到所述語音信號時，通過深度相機(jī)獲取語音信號的音源對應(yīng)的輪廓信息的過程包括：基于麥克風(fēng)定位系統(tǒng)確定語音信號的音源的初步位置；基于深度相機(jī)采集初步位置處的真實(shí)環(huán)境的局部圖片信息；基于局部圖片信息確定音源對應(yīng)的輪廓信息。

此外，可選的技術(shù)方案是，基于麥克風(fēng)定位系統(tǒng)確定語音信號的音源的初步位置，包括：基于麥克風(fēng)定位系統(tǒng)中的麥克風(fēng)陣列接收到的語音信號的時間，確定聲源的距離信息；基于麥克風(fēng)陣列中各麥克風(fēng)接收到的語音信號的時間差，確定聲源的角度信息；基于距離信息以及角度信息，確定聲源的初步位置。

此外，可選的技術(shù)方案是，基于輪廓信息對三維虛擬場景進(jìn)行調(diào)節(jié)的過程包括：根據(jù)輪廓信息確定顯示系統(tǒng)的顯示畫面的屏蔽區(qū)域；調(diào)節(jié)三維虛擬場景中與屏蔽區(qū)域?qū)?yīng)部分的顯示程度。

此外，可選的技術(shù)方案是，屏蔽區(qū)域的個數(shù)與音源的個數(shù)相一致。