[發(fā)明專(zhuān)利]虛擬直播的場(chǎng)景處理方法及裝置、存儲(chǔ)介質(zhì)、電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202111363829.4
• 申請(qǐng)日: 2021-11-17
• 公開(kāi)（公告）號(hào): CN114092671A
• 公開(kāi)（公告）日: 2022-02-25
• 發(fā)明（設(shè)計(jì)）人: 莊宇軒
• 申請(qǐng)（專(zhuān)利權(quán)）人: 廣州博冠信息科技有限公司
• 主分類(lèi)號(hào): G06T19/00
• 分類(lèi)號(hào): G06T19/00;G06T15/50;H04N21/2187;H04N21/4788;H04N21/488
• 代理公司: 北京律智知識(shí)產(chǎn)權(quán)代理有限公司 11438
• 代理人: 王輝;闞梓瑄

本公開(kāi)屬于直播技術(shù)領(lǐng)域，涉及一種虛擬直播的場(chǎng)景處理方法及裝置、存儲(chǔ)介質(zhì)、電子設(shè)備。該方法包括：獲取目標(biāo)觀眾端的增強(qiáng)體驗(yàn)數(shù)據(jù)以及與增強(qiáng)體驗(yàn)數(shù)據(jù)對(duì)應(yīng)的體驗(yàn)增強(qiáng)條件，并獲取虛擬場(chǎng)景中的當(dāng)前場(chǎng)景數(shù)據(jù)；當(dāng)增強(qiáng)體驗(yàn)數(shù)據(jù)滿(mǎn)足所述體驗(yàn)增強(qiáng)條件時(shí)，通過(guò)調(diào)整當(dāng)前場(chǎng)景數(shù)據(jù)對(duì)虛擬場(chǎng)景進(jìn)行更新，以在目標(biāo)觀眾端顯示更新后的虛擬場(chǎng)景。本公開(kāi)利用體驗(yàn)增強(qiáng)數(shù)據(jù)對(duì)增強(qiáng)體驗(yàn)數(shù)據(jù)進(jìn)行匹配判斷，以調(diào)整當(dāng)前場(chǎng)景數(shù)據(jù)實(shí)現(xiàn)虛擬場(chǎng)景的實(shí)時(shí)動(dòng)態(tài)更新，為用戶(hù)提供區(qū)別于正常虛擬直播效果的差異化和定制化視覺(jué)體驗(yàn)。同時(shí)，不影響其他用戶(hù)的正常觀看體驗(yàn)，實(shí)現(xiàn)同一虛擬直播分支化展示的效果，滿(mǎn)足不同用戶(hù)的觀看需求，從深度和廣度上優(yōu)化用戶(hù)的虛擬直播觀看體驗(yàn)。

技術(shù)領(lǐng)域

本公開(kāi)涉及直播技術(shù)領(lǐng)域，尤其涉及一種虛擬直播的場(chǎng)景處理方法與虛擬直播的場(chǎng)景處理裝置、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)及電子設(shè)備。

背景技術(shù)

在目前的實(shí)景直播中，直播間內(nèi)的場(chǎng)景效果都為實(shí)景裝修，并且進(jìn)行真實(shí)拍攝得到。而虛擬直播可以通過(guò)UE(Unreal Engine，虛幻引擎)服務(wù)端將人像放置于提前制作好的虛擬場(chǎng)景中進(jìn)行開(kāi)播。相比較而言，虛擬直播因無(wú)需購(gòu)置實(shí)景而成本更低，并且無(wú)需增加實(shí)體，能夠?qū)崿F(xiàn)虛擬效果，且?guī)?lái)了高擴(kuò)展性，因此在日常的直播場(chǎng)景內(nèi)逐漸有了更多的應(yīng)用。

但是，在目前的虛擬直播中，由于虛擬相機(jī)的機(jī)位過(guò)于固定，無(wú)法調(diào)整，同時(shí)UE引擎渲染整個(gè)虛擬場(chǎng)景的性能消耗巨大，因而產(chǎn)生了很多無(wú)效開(kāi)銷(xiāo)。此外，機(jī)位固定還會(huì)導(dǎo)致實(shí)際直播的呈現(xiàn)效果與常規(guī)直播間的差異小，使得用戶(hù)無(wú)法感知虛擬直播帶來(lái)的優(yōu)化體驗(yàn)和使用效果。

鑒于此，本領(lǐng)域亟需開(kāi)發(fā)一種新的虛擬直播的場(chǎng)景處理方法及裝置。

需要說(shuō)明的是，在上述背景技術(shù)部分公開(kāi)的信息僅用于加強(qiáng)對(duì)本公開(kāi)的背景的理解，因此可以包括不構(gòu)成對(duì)本領(lǐng)域普通技術(shù)人員已知的現(xiàn)有技術(shù)的信息。

發(fā)明內(nèi)容

本公開(kāi)的目的在于提供一種虛擬直播的場(chǎng)景處理方法、虛擬直播的場(chǎng)景處理裝置、計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)及電子設(shè)備，進(jìn)而至少在一定程度上克服由于相關(guān)技術(shù)的限制而導(dǎo)致的性能消耗大和直播效果不佳的技術(shù)問(wèn)題。

本公開(kāi)的其他特性和優(yōu)點(diǎn)將通過(guò)下面的詳細(xì)描述變得顯然，或部分地通過(guò)本公開(kāi)的實(shí)踐而習(xí)得。

根據(jù)本發(fā)明實(shí)施例的第一個(gè)方面，提供一種虛擬直播的場(chǎng)景處理方法，所述方法包括：

獲取目標(biāo)觀眾端的增強(qiáng)體驗(yàn)數(shù)據(jù)以及與所述增強(qiáng)體驗(yàn)數(shù)據(jù)對(duì)應(yīng)的體驗(yàn)增強(qiáng)條件，并獲取虛擬場(chǎng)景中的當(dāng)前場(chǎng)景數(shù)據(jù)；

當(dāng)所述增強(qiáng)體驗(yàn)數(shù)據(jù)滿(mǎn)足所述體驗(yàn)增強(qiáng)條件時(shí)，通過(guò)調(diào)整所述當(dāng)前場(chǎng)景數(shù)據(jù)對(duì)所述虛擬場(chǎng)景進(jìn)行更新，以在所述目標(biāo)觀眾端顯示更新后的所述虛擬場(chǎng)景。

在本發(fā)明的一種示例性實(shí)施例中，所述增強(qiáng)體驗(yàn)數(shù)據(jù)，包括：觀眾圖像數(shù)據(jù)和終端設(shè)備數(shù)據(jù)。

在本發(fā)明的一種示例性實(shí)施例中，所述獲取目標(biāo)觀眾端的增強(qiáng)體驗(yàn)數(shù)據(jù)以及與所述增強(qiáng)體驗(yàn)數(shù)據(jù)對(duì)應(yīng)的體驗(yàn)增強(qiáng)條件，包括：

獲取目標(biāo)觀眾端的局部位置數(shù)據(jù)，并對(duì)所述局部位置數(shù)據(jù)進(jìn)行場(chǎng)景深度識(shí)別得到觀眾圖像數(shù)據(jù)；

獲取目標(biāo)觀眾端的設(shè)備傾角數(shù)據(jù)，并對(duì)所述設(shè)備傾角數(shù)據(jù)進(jìn)行設(shè)備趨勢(shì)判定得到終端設(shè)備數(shù)據(jù)，以獲取與所述觀眾圖像數(shù)據(jù)和所述終端設(shè)備數(shù)據(jù)對(duì)應(yīng)的體驗(yàn)增強(qiáng)條件。

在本發(fā)明的一種示例性實(shí)施例中，所述局部位置數(shù)據(jù)，包括：眼睛位置數(shù)據(jù)和瞳孔位置數(shù)據(jù)。

在本發(fā)明的一種示例性實(shí)施例中，所述對(duì)所述局部位置數(shù)據(jù)進(jìn)行場(chǎng)景深度識(shí)別得到觀眾圖像數(shù)據(jù)，包括：

對(duì)所述瞳孔位置數(shù)據(jù)進(jìn)行場(chǎng)景深度識(shí)別得到視線(xiàn)夾角，并對(duì)所述視線(xiàn)夾角和所述眼睛位置數(shù)據(jù)進(jìn)行注視視線(xiàn)計(jì)算得到視線(xiàn)范圍數(shù)據(jù)；

對(duì)所述視線(xiàn)范圍數(shù)據(jù)進(jìn)行區(qū)域范圍清洗得到觀眾圖像數(shù)據(jù)。