[發(fā)明專利]一種圖像展示方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請?zhí)枺?/td>: 202210575768.6
• 申請日: 2022-05-24
• 公開（公告）號: CN115002442A
• 公開（公告）日: 2022-09-02
• 發(fā)明（設(shè)計(jì)）人: 焦少慧
• 申請（專利權(quán)）人: 北京字節(jié)跳動(dòng)網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號: H04N13/279
• 分類號: H04N13/279;H04N13/282;G06T15/20;G06T19/00
• 代理公司: 北京遠(yuǎn)智匯知識(shí)產(chǎn)權(quán)代理有限公司 11659
• 代理人: 魯艷萍

本公開實(shí)施例公開了一種圖像展示方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。該方法包括：獲取與目標(biāo)視頻中的各視頻幀分別對應(yīng)的轉(zhuǎn)換圖像；獲取背景拍攝設(shè)備于目標(biāo)時(shí)刻下的背景位姿，從與目標(biāo)時(shí)刻對應(yīng)的各轉(zhuǎn)換圖像中確定與背景位姿對應(yīng)的視角圖像；根據(jù)背景位姿，將視角圖像中的像素點(diǎn)轉(zhuǎn)換到背景拍攝設(shè)備所在的背景拍攝坐標(biāo)系下，得到目標(biāo)圖像；將背景拍攝設(shè)備于目標(biāo)時(shí)刻下拍攝的背景圖像、與目標(biāo)圖像進(jìn)行合并，并將合并后得到的增強(qiáng)現(xiàn)實(shí)圖像進(jìn)行展示。本公開實(shí)施例的技術(shù)方案，可以基于AR方式展示目標(biāo)視頻中的視頻幀，即基于AR方式播放目標(biāo)視頻，其通過AR方式實(shí)現(xiàn)了目標(biāo)視頻的交互式觀看過程，從而保證了用戶觀看目標(biāo)視頻時(shí)的自由度。

技術(shù)領(lǐng)域

本公開實(shí)施例涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，尤其涉及一種圖像展示方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

自由視角視頻是時(shí)下熱門的一種視頻形式，其是通過向用戶提供交互選擇觀看角度的功能，賦予了固定二維(two dimensional,2D)視頻“移步換景”的觀看體驗(yàn)，從而給用戶帶來了強(qiáng)烈的立體沖擊。

目前主要是通過構(gòu)建單獨(dú)的交互式播放器來展示自由視角視頻，該交互式播放器可以通過滑動(dòng)條方式展現(xiàn)給用戶，以使用戶通過拖動(dòng)滑動(dòng)條來觀看不同視角下的視頻。但是，這種方式會(huì)導(dǎo)致用戶觀看的自由度受到限制，體驗(yàn)不佳。

發(fā)明內(nèi)容

本公開實(shí)施例提供了一種圖像展示方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，以基于增強(qiáng)現(xiàn)實(shí)(Augmented Reality,AR)方式展示目標(biāo)視頻中的視頻幀，即基于AR方式展示目標(biāo)視頻，從而保證用戶觀看目標(biāo)視頻時(shí)的自由度。

第一方面，本公開實(shí)施例提供了一種圖像展示方法，可以包括：

獲取與目標(biāo)視頻中的各視頻幀分別對應(yīng)的轉(zhuǎn)換圖像，其中，轉(zhuǎn)換圖像是將前景圖像中位于圖像坐標(biāo)系下的像素點(diǎn)轉(zhuǎn)換到增強(qiáng)現(xiàn)實(shí)坐標(biāo)系下后得到的圖像，前景圖像是從視頻幀中提取出的包含前景對象的圖像，目標(biāo)視頻包括自由視角視頻或是光場視頻；

獲取背景拍攝設(shè)備于目標(biāo)時(shí)刻下的背景位姿，從與目標(biāo)時(shí)刻對應(yīng)的各轉(zhuǎn)換圖像中確定與背景位姿對應(yīng)的視角圖像；

根據(jù)背景位姿，將視角圖像中的像素點(diǎn)轉(zhuǎn)換到背景拍攝設(shè)備所在的背景拍攝坐標(biāo)系下，得到目標(biāo)圖像；

將背景拍攝設(shè)備于目標(biāo)時(shí)刻下拍攝的背景圖像、與目標(biāo)圖像進(jìn)行合并，并將合并后得到的增強(qiáng)現(xiàn)實(shí)圖像進(jìn)行展示。

第二方面，本公開實(shí)施例還提供了一種圖像展示裝置，可以包括：

轉(zhuǎn)換圖像獲取模塊，用于獲取目標(biāo)視頻中的各視頻幀分別對應(yīng)的轉(zhuǎn)換圖像，其中，轉(zhuǎn)換圖像是將前景圖像中的位于圖像坐標(biāo)系下的像素點(diǎn)轉(zhuǎn)換到增強(qiáng)現(xiàn)實(shí)坐標(biāo)系下后得到的圖像，前景圖像是從視頻幀中提取出的包含前景對象的圖像，目標(biāo)視頻包括自由視角視頻或是光場視頻；

視角圖像確定模塊，用于獲取背景拍攝設(shè)備于目標(biāo)時(shí)刻下的背景位姿，從與目標(biāo)時(shí)刻對應(yīng)的各轉(zhuǎn)換圖像中確定與背景位姿對應(yīng)的視角圖像；

目標(biāo)圖像得到模塊，用于根據(jù)背景位姿，將視角圖像中的像素點(diǎn)轉(zhuǎn)換到背景拍攝設(shè)備所在的背景拍攝坐標(biāo)系下，得到目標(biāo)圖像；

增強(qiáng)現(xiàn)實(shí)圖像展示模塊，用于將背景拍攝設(shè)備于目標(biāo)時(shí)刻下拍攝到的背景圖像、與目標(biāo)圖像進(jìn)行合并，并將合并后得到的增強(qiáng)現(xiàn)實(shí)圖像進(jìn)行展示。

第三方面，本公開實(shí)施例還提供了一種電子設(shè)備，可以包括：

一個(gè)或多個(gè)處理器；

存儲(chǔ)器，用于存儲(chǔ)一個(gè)或多個(gè)程序，

當(dāng)一個(gè)或多個(gè)程序被一個(gè)或多個(gè)處理器執(zhí)行，使得一個(gè)或多個(gè)處理器實(shí)現(xiàn)本公開任意實(shí)施例所提供的圖像展示方法。

第四方面，本公開實(shí)施例還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)本公開任意實(shí)施例所提供的圖像展示方法。