[發(fā)明專利]用于在全景視頻中融合對(duì)象的方法和裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201710537524.8
• 申請(qǐng)日: 2017-07-04
• 公開(kāi)（公告）號(hào): CN109214979B
• 公開(kāi)（公告）日: 2020-09-29
• 發(fā)明（設(shè)計(jì)）人: 何進(jìn)萍;趙剛;李文博;彭碧
• 申請(qǐng)（專利權(quán)）人: 北京京東尚科信息技術(shù)有限公司;北京京東世紀(jì)貿(mào)易有限公司
• 主分類號(hào): G06T3/00
• 分類號(hào): G06T3/00;G06T3/40;H04N21/431
• 代理公司: 北京英賽嘉華知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11204
• 代理人: 王達(dá)佐;馬曉亞

1.一種用于在全景視頻中融合對(duì)象的方法，其特征在于，所述方法包括：

在全景視頻播放器中播放全景視頻；

獲取目標(biāo)對(duì)象，所述目標(biāo)對(duì)象來(lái)自所述全景視頻外部；

解析所述目標(biāo)對(duì)象，得到所述目標(biāo)對(duì)象的坐標(biāo)參數(shù)以及材質(zhì)參數(shù)；

根據(jù)所述坐標(biāo)參數(shù)以及所述材質(zhì)參數(shù)，設(shè)置所述目標(biāo)對(duì)象融合在全景視頻時(shí)每個(gè)像素的顏色，得到著色后的目標(biāo)對(duì)象；

將著色后的目標(biāo)對(duì)象融合在所述全景視頻中；

所述根據(jù)所述坐標(biāo)參數(shù)以及所述材質(zhì)參數(shù)，設(shè)置所述目標(biāo)對(duì)象每個(gè)像素的顏色，得到著色后的目標(biāo)對(duì)象，包括：

根據(jù)所述坐標(biāo)參數(shù)，確定所述目標(biāo)對(duì)象投影到所述投影面對(duì)應(yīng)的二維坐標(biāo)；

根據(jù)所述材質(zhì)參數(shù)，確定所述目標(biāo)對(duì)象對(duì)光線的反射系數(shù)；

根據(jù)所述二維坐標(biāo)、所述反射系數(shù)以及預(yù)設(shè)的環(huán)境光強(qiáng)度和方向光強(qiáng)度，確定在所述全景視頻中融合所述目標(biāo)對(duì)象時(shí)各像素的顏色。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述在全景視頻播放器中播放全景視頻，包括：

獲取所述全景視頻的序列幀；

將各序列幀映射在預(yù)設(shè)的全景視頻播放模型的內(nèi)表面；

將所述全景視頻播放模型的對(duì)應(yīng)觀察界面的部分投影到投影面，以播放所述全景視頻。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述材質(zhì)參數(shù)，確定所述目標(biāo)對(duì)象對(duì)光線的反射系數(shù)，包括：

根據(jù)預(yù)設(shè)的材質(zhì)參數(shù)與反射系數(shù)的對(duì)應(yīng)列表以及所述材質(zhì)參數(shù)，確定所述目標(biāo)對(duì)象對(duì)光線的反射系數(shù)。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述二維坐標(biāo)、所述反射系數(shù)以及預(yù)設(shè)的環(huán)境光強(qiáng)度和方向光強(qiáng)度，確定在所述全景視頻中融合所述目標(biāo)對(duì)象時(shí)各像素的顏色，包括：

根據(jù)所述二維坐標(biāo)，確定所述目標(biāo)對(duì)象融合在所述全景視頻時(shí)各像素的坐標(biāo)；

根據(jù)各像素的坐標(biāo)、所述反射系數(shù)以及預(yù)設(shè)的環(huán)境光強(qiáng)度和方向光強(qiáng)度，確定所述目標(biāo)對(duì)象融合在所述全景視頻時(shí)各像素的光照強(qiáng)度；

根據(jù)各像素的光照強(qiáng)度，確定各像素的顏色。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將著色后的目標(biāo)對(duì)象融合在所述全景視頻中，包括：

獲取所述目標(biāo)對(duì)象在所述全景視頻中的位置坐標(biāo)；

對(duì)著色后的目標(biāo)對(duì)象進(jìn)行處理，所述處理包括以下至少一項(xiàng)：縮放、平移、旋轉(zhuǎn)；

根據(jù)所述位置坐標(biāo)，定位處理后的目標(biāo)對(duì)象。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述方法還包括：

獲取所述全景視頻播放器的傳感器數(shù)據(jù)；

根據(jù)所述傳感器數(shù)據(jù)，確定全景視頻播放器的朝向是否與所述位置坐標(biāo)相交；

響應(yīng)于所述全景視頻播放器的朝向與所述位置坐標(biāo)相交，統(tǒng)計(jì)二者相交的持續(xù)時(shí)間；

當(dāng)所述持續(xù)時(shí)間大于預(yù)設(shè)閾值時(shí)，顯示預(yù)設(shè)的交互界面。

7.一種用于在全景視頻中融合對(duì)象的裝置，其特征在于，所述裝置包括：

全景視頻播放單元，用于在全景視頻播放器中播放全景視頻；

目標(biāo)對(duì)象獲取單元，用于獲取目標(biāo)對(duì)象，所述目標(biāo)對(duì)象來(lái)自所述全景視頻外部；

目標(biāo)對(duì)象解析單元，用于解析所述目標(biāo)對(duì)象，得到所述目標(biāo)對(duì)象的坐標(biāo)參數(shù)以及材質(zhì)參數(shù)；

目標(biāo)對(duì)象著色單元，用于根據(jù)所述坐標(biāo)參數(shù)以及所述材質(zhì)參數(shù)，設(shè)置所述目標(biāo)對(duì)象融合在全景視頻時(shí)每個(gè)像素的顏色，得到著色后的目標(biāo)對(duì)象；

目標(biāo)對(duì)象融合單元，用于將著色后的目標(biāo)對(duì)象融合在所述全景視頻中；

所述目標(biāo)對(duì)象著色單元包括：

二維坐標(biāo)確定模塊，用于根據(jù)所述坐標(biāo)參數(shù)，確定所述目標(biāo)對(duì)象投影到所述投影面對(duì)應(yīng)的二維坐標(biāo)；

反射系數(shù)確定模塊，用于根據(jù)所述材質(zhì)參數(shù)，確定所述目標(biāo)對(duì)象對(duì)光線的反射系數(shù)；

像素顏色確定模塊，用于根據(jù)所述二維坐標(biāo)、所述反射系數(shù)以及預(yù)設(shè)的環(huán)境光強(qiáng)度和方向光強(qiáng)度，確定在所述全景視頻中融合所述目標(biāo)對(duì)象時(shí)各像素的顏色。