[發(fā)明專(zhuān)利]全景視頻數(shù)據(jù)處理方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 202110571013.4
• 申請(qǐng)日: 2021-05-25
• 公開(kāi)（公告）號(hào): CN113315914B
• 公開(kāi)（公告）日: 2022-05-17
• 發(fā)明（設(shè)計(jì)）人: 潘一漢
• 申請(qǐng)（專(zhuān)利權(quán)）人: 上海嗶哩嗶哩科技有限公司
• 主分類(lèi)號(hào): H04N5/232
• 分類(lèi)號(hào): H04N5/232
• 代理公司: 北京智信禾專(zhuān)利代理有限公司 11637
• 代理人: 劉曉楠

本申請(qǐng)?zhí)峁┤耙曨l數(shù)據(jù)處理方法及裝置，其中全景視頻數(shù)據(jù)處理方法包括：在檢測(cè)到目標(biāo)對(duì)象的中心進(jìn)入固定視角區(qū)域的情況下，確定當(dāng)前視頻幀中框選目標(biāo)對(duì)象的目標(biāo)邊框的參考極坐標(biāo)；根據(jù)下一視頻幀在球極坐標(biāo)系中的全景圖像，以參考極坐標(biāo)為中心，生成下一視頻幀的跟蹤平面圖像；將下一視頻幀作為當(dāng)前視頻幀，返回執(zhí)行根據(jù)下一視頻幀在球極坐標(biāo)系中的全景圖像，以參考極坐標(biāo)為中心，生成下一視頻幀的跟蹤平面圖像的操作步驟，直至目標(biāo)對(duì)象的中心離開(kāi)固定視角解除區(qū)域。如此，只要目標(biāo)對(duì)象沒(méi)有離開(kāi)固定視角解除區(qū)域，就始終以同一個(gè)極坐標(biāo)為中心生成相應(yīng)的平面圖像，從而有效消除目標(biāo)對(duì)象以大角度移動(dòng)時(shí)，導(dǎo)致的跟蹤效果不準(zhǔn)確。

技術(shù)領(lǐng)域

本申請(qǐng)涉及圖像處理技術(shù)領(lǐng)域，特別涉及一種全景視頻數(shù)據(jù)處理方法。本申請(qǐng)同時(shí)涉及一種全景視頻數(shù)據(jù)處理裝置，一種計(jì)算設(shè)備，以及一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著計(jì)算機(jī)技術(shù)和圖像處理技術(shù)的快速發(fā)展，全景視頻應(yīng)運(yùn)而生，全景視頻的拍攝以及制作越來(lái)越受到人們的追捧，許多的視頻網(wǎng)站也將全景視頻作為一個(gè)專(zhuān)門(mén)的類(lèi)別供用戶(hù)選擇并觀看。全景視頻是通過(guò)全景相機(jī)拍攝的、包含360度全方位畫(huà)面內(nèi)容的動(dòng)態(tài)視頻，它將靜態(tài)的全景圖片轉(zhuǎn)化為動(dòng)態(tài)的視頻圖像，用戶(hù)能夠任意觀看在全景攝像機(jī)拍攝角度范圍內(nèi)的動(dòng)態(tài)視頻。

現(xiàn)有技術(shù)中，對(duì)全景視頻中的目標(biāo)對(duì)象進(jìn)行跟蹤時(shí)，往往是直接將全景視頻解碼為幀序列圖像后，直接在解碼得到的原始全景圖像上逐幀進(jìn)行目標(biāo)對(duì)象的識(shí)別和跟蹤。然而，當(dāng)目標(biāo)對(duì)象穿過(guò)或者以大角度經(jīng)過(guò)球極坐標(biāo)系的正下方或者上方時(shí)，即目標(biāo)對(duì)象以大角度移動(dòng)時(shí)，當(dāng)前播放畫(huà)面會(huì)發(fā)生瞬間接近垂直翻轉(zhuǎn)或者大角度偏轉(zhuǎn)的效果，因而可能導(dǎo)致無(wú)法對(duì)目標(biāo)對(duì)象進(jìn)行跟蹤，跟蹤效果較差。

發(fā)明內(nèi)容

有鑒于此，本申請(qǐng)實(shí)施例提供了一種全景視頻數(shù)據(jù)處理方法。本申請(qǐng)同時(shí)涉及一種全景視頻數(shù)據(jù)處理裝置，一種計(jì)算設(shè)備，以及一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，以解決現(xiàn)有技術(shù)中存在的全景視頻中目標(biāo)對(duì)象以大角度移動(dòng)時(shí)跟蹤效果較差的問(wèn)題。

根據(jù)本申請(qǐng)實(shí)施例的第一方面，提供了一種全景視頻數(shù)據(jù)處理方法，包括：

在檢測(cè)到目標(biāo)對(duì)象的中心進(jìn)入固定視角區(qū)域的情況下，確定當(dāng)前視頻幀中框選目標(biāo)對(duì)象的目標(biāo)邊框的參考極坐標(biāo)；

根據(jù)下一視頻幀在所述球極坐標(biāo)系中的全景圖像，以所述參考極坐標(biāo)為中心，生成所述下一視頻幀的跟蹤平面圖像；

將所述下一視頻幀作為當(dāng)前視頻幀，返回執(zhí)行所述根據(jù)下一視頻幀在所述球極坐標(biāo)系中的全景圖像，以所述參考極坐標(biāo)為中心，生成所述下一視頻幀的跟蹤平面圖像的操作步驟，直至所述目標(biāo)對(duì)象的中心離開(kāi)固定視角解除區(qū)域。

根據(jù)本申請(qǐng)實(shí)施例的第二方面，提供了一種全景視頻數(shù)據(jù)處理裝置，包括：

第一確定模塊，被配置為在檢測(cè)到目標(biāo)對(duì)象的中心進(jìn)入固定視角區(qū)域的情況下，確定當(dāng)前視頻幀中框選目標(biāo)對(duì)象的目標(biāo)邊框的參考極坐標(biāo)；

生成模塊，被配置為根據(jù)下一視頻幀在所述球極坐標(biāo)系中的全景圖像，以所述參考極坐標(biāo)為中心，生成所述下一視頻幀的跟蹤平面圖像；

執(zhí)行模塊，被配置為將所述下一視頻幀作為當(dāng)前視頻幀，返回執(zhí)行所述根據(jù)下一視頻幀在所述球極坐標(biāo)系中的全景圖像，以所述參考極坐標(biāo)為中心，生成所述下一視頻幀的跟蹤平面圖像的操作步驟，直至所述目標(biāo)對(duì)象的中心離開(kāi)固定視角解除區(qū)域。

根據(jù)本申請(qǐng)實(shí)施例的第三方面，提供了一種計(jì)算設(shè)備，包括：

存儲(chǔ)器和處理器；

所述存儲(chǔ)器用于存儲(chǔ)計(jì)算機(jī)可執(zhí)行指令，所述處理器用于執(zhí)行所述計(jì)算機(jī)可執(zhí)行指令，以實(shí)現(xiàn)下述方法：

在檢測(cè)到目標(biāo)對(duì)象的中心進(jìn)入固定視角區(qū)域的情況下，確定當(dāng)前視頻幀中框選目標(biāo)對(duì)象的目標(biāo)邊框的參考極坐標(biāo)；

根據(jù)下一視頻幀在所述球極坐標(biāo)系中的全景圖像，以所述參考極坐標(biāo)為中心，生成所述下一視頻幀的跟蹤平面圖像；