[發(fā)明專利]全息虛擬人AR互動展示方法、裝置及設(shè)備在審
| 申請?zhí)枺?/td> | 201910939486.8 | 申請日: | 2019-09-30 |
| 公開(公告)號: | CN110673735A | 公開(公告)日: | 2020-01-10 |
| 發(fā)明(設(shè)計)人: | 不公告發(fā)明人 | 申請(專利權(quán))人: | 長沙自由視像信息科技有限公司 |
| 主分類號: | G06F3/01 | 分類號: | G06F3/01;G06T19/00;G06T7/80 |
| 代理公司: | 43225 長沙國科天河知識產(chǎn)權(quán)代理有限公司 | 代理人: | 邱軼 |
| 地址: | 410000 湖南省長沙市岳麓區(qū)高*** | 國省代碼: | 湖南;43 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 全息 互動區(qū)域 實時場景 互動 虛擬形象 畫面幀 預(yù)設(shè) 顯示組件 單方 虛擬 發(fā)送 裝置及設(shè)備 場景畫面 多次重復(fù) 時間排序 手機(jī) 佩戴 眼鏡 展示 融合 | ||
本發(fā)明公開一種全息虛擬人AR互動展示方法、裝置及設(shè)備,包括如下步驟:步驟101,獲取當(dāng)前時刻互動區(qū)域的實時單方位或多方位視圖;步驟102,根據(jù)互動區(qū)域的實時單方位或多方位視圖得到當(dāng)前時刻互動區(qū)域的實時場景畫面;步驟103,將當(dāng)前時刻互動區(qū)域的實時場景畫面與預(yù)設(shè)參與者的全息虛擬形象進(jìn)行場景畫面融合,得到在當(dāng)前時刻實時場景畫面與預(yù)設(shè)參與者的全息虛擬形象之間交互的畫面幀,并將所述畫面幀發(fā)送至顯示組件進(jìn)行顯示;步驟104,多次重復(fù)步驟101?103,獲取按時間排序的多個實時場景畫面與預(yù)設(shè)參與者的全息虛擬形象之間交互的畫面幀,并發(fā)送至顯示組件以完成全息虛擬人AR互動展示。使得互動參與者不需要佩戴AR眼鏡或手持手機(jī)即能參與互動,體驗方便。
技術(shù)領(lǐng)域
本發(fā)明涉及信息、計算機(jī)應(yīng)用、AR/VR應(yīng)用技術(shù)領(lǐng)域,具體是一種全息虛擬人AR互動展示方法、裝置及設(shè)備。
背景技術(shù)
當(dāng)前AR互動展示通常需要參與者通過佩戴手持手機(jī)或AR眼鏡等方式來參與,往往使得參與者的體驗不便也不佳。
發(fā)明內(nèi)容
本發(fā)明提供一種全息虛擬人AR互動展示方法、裝置及設(shè)備,參與者不需要佩戴AR眼鏡或手持手機(jī),參與體驗方便。
為實現(xiàn)上述目的,本發(fā)明提供全息虛擬人AR互動展示方法,采用攝像組件對互動區(qū)域進(jìn)行覆蓋拍攝,將能夠反映預(yù)設(shè)參與者表演內(nèi)容的全息虛擬形象錄入控制模塊,具體包括如下步驟:
步驟101,獲取當(dāng)前時刻互動區(qū)域的實時單方位或多方位視圖;
步驟102,根據(jù)互動區(qū)域的實時單方位或多方位視圖得到當(dāng)前時刻互動區(qū)域的實時場景畫面;
步驟103,將當(dāng)前時刻互動區(qū)域的實時場景畫面與預(yù)設(shè)參與者的全息虛擬形象進(jìn)行場景畫面融合,得到在當(dāng)前時刻實時場景畫面與預(yù)設(shè)參與者的全息虛擬形象之間交互的畫面幀,并將所述畫面幀發(fā)送至顯示組件進(jìn)行顯示;
步驟104,多次重復(fù)步驟101-103,獲取按時間排序的多個實時場景畫面與預(yù)設(shè)參與者的全息虛擬形象之間交互的畫面幀,并發(fā)送至顯示組件以完成全息虛擬人AR互動展示。
進(jìn)一步優(yōu)選的,所述將預(yù)設(shè)參與者的全息虛擬形象錄入控制模塊的過程為:
步驟201,獲取預(yù)設(shè)參與者在表演狀態(tài)下的多方位視圖;
步驟202,根據(jù)步驟201中預(yù)設(shè)參與者的多方位視圖對預(yù)設(shè)參與者的實時特征進(jìn)行3D全息虛擬化,得到能夠反映預(yù)設(shè)參與者表演內(nèi)容的全息虛擬形象;
步驟203,將能夠反映預(yù)設(shè)參與者表演內(nèi)容的全息虛擬形象存儲至控制模塊。
進(jìn)一步優(yōu)選的,步驟202中,所述預(yù)設(shè)參與者的實時特征包括:身體姿態(tài)特征、表情神態(tài)特征、服裝特征、毛發(fā)特征。
進(jìn)一步優(yōu)選的,步驟203中,將當(dāng)前時刻互動區(qū)域的實時場景畫面與預(yù)設(shè)參與者的全息虛擬形象進(jìn)行場景畫面融合,具體為:
基于預(yù)設(shè)參與者的全息虛擬形象的手勢、身體姿勢與當(dāng)前時刻互動區(qū)域的實時場景畫面融合。
進(jìn)一步優(yōu)選的,步驟104還包括獲取攝像組件當(dāng)前時刻的外參,具體過程為:
步驟301,獲取攝像組件當(dāng)前幀與上一幀拍攝的圖像,并獲取兩幀圖像之間的光流;
步驟302,根據(jù)當(dāng)前幀圖像與上一幀圖像之間的光流獲取當(dāng)前幀圖像相對上一幀圖像的單應(yīng)矩陣;
步驟303,根據(jù)單應(yīng)矩陣獲取當(dāng)前幀圖像與上一幀圖像之間攝像組件外參的變化參數(shù);
步驟304,根據(jù)前幀圖像與上一幀圖像之間攝像組件外參的變化參數(shù)以及上一幀圖像對應(yīng)時刻攝像組件的外參獲取當(dāng)前幀對應(yīng)時刻攝像組件的外參,即當(dāng)前時刻的攝像機(jī)外參。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于長沙自由視像信息科技有限公司,未經(jīng)長沙自由視像信息科技有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910939486.8/2.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F3-00 用于將所要處理的數(shù)據(jù)轉(zhuǎn)變成為計算機(jī)能夠處理的形式的輸入裝置;用于將數(shù)據(jù)從處理機(jī)傳送到輸出設(shè)備的輸出裝置,例如,接口裝置
G06F3-01 .用于用戶和計算機(jī)之間交互的輸入裝置或輸入和輸出組合裝置
G06F3-05 .在規(guī)定的時間間隔上,利用模擬量取樣的數(shù)字輸入
G06F3-06 .來自記錄載體的數(shù)字輸入,或者到記錄載體上去的數(shù)字輸出
G06F3-09 .到打字機(jī)上去的數(shù)字輸出
G06F3-12 .到打印裝置上去的數(shù)字輸出





