[發(fā)明專利]對象融合方法、裝置、計算機可讀存儲介質(zhì)及電子設(shè)備

有效

• 申請?zhí)枺?/td>: 202010601645.6
• 申請日: 2020-06-28
• 公開（公告）號: CN111652831B
• 公開（公告）日: 2022-04-19
• 發(fā)明（設(shè)計）人: 余自強
• 申請（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06V20/40;G06V10/80;G06V10/82;G06K9/62;G06T7/70;G06N3/04;G06N3/08
• 代理公司: 深圳市隆天聯(lián)鼎知識產(chǎn)權(quán)代理有限公司 44232
• 代理人: 葉虹

本申請?zhí)峁┮环N對象融合方法、對象融合裝置、計算機可讀存儲介質(zhì)及電子設(shè)備；涉及計算機視覺技術(shù)領(lǐng)域；確定視頻文件中目標(biāo)視頻幀的結(jié)構(gòu)直線；根據(jù)直線選取操作從結(jié)構(gòu)直線中確定目標(biāo)視頻幀的滅點直線；根據(jù)目標(biāo)視頻幀的滅點直線確定相機姿態(tài)；根據(jù)相機姿態(tài)將待融合對象融合至目標(biāo)視頻幀中。可見，實施本申請的技術(shù)方案，可以提升待融合對象與視頻文件之間的融合度，進而改善融合效果。

技術(shù)領(lǐng)域

本申請涉及計算機視覺技術(shù)領(lǐng)域，具體而言，涉及一種對象融合方法、對象融合裝置、計算機可讀存儲介質(zhì)及電子設(shè)備。

背景技術(shù)

一般來說，人們有時會有在視頻文件中增加額外元素的需求，例如，廣告商需要在電視劇中增加廣告元素。現(xiàn)有的用于滿足上述需求的方式通常為：在視頻文件的制作前期將額外元素融入視頻場景中，以使得視頻文件制作完成后，其中就已經(jīng)包括了所需的額外元素；或者，直接將額外元素的貼圖增加至視頻文件中。但是，上述方式一般存在額外元素與視頻文件之間融合度不高的問題，進而容易造成融合效果不佳的問題。

需要說明的是，在上述背景技術(shù)部分公開的信息僅用于加強對本申請的背景的理解，因此可以包括不構(gòu)成對本領(lǐng)域普通技術(shù)人員已知的現(xiàn)有技術(shù)的信息。

發(fā)明內(nèi)容

本申請的目的在于提供一種對象融合方法、對象融合裝置、計算機可讀存儲介質(zhì)及電子設(shè)備，可以提升待融合對象與視頻文件之間的融合度，進而改善融合效果。

本申請的其他特性和優(yōu)點將通過下面的詳細描述變得顯然，或部分地通過本申請的實踐而習(xí)得。

根據(jù)本申請的第一方面，提供一種對象融合方法，包括：

確定視頻文件中目標(biāo)視頻幀的結(jié)構(gòu)直線；

根據(jù)直線選取操作從所述結(jié)構(gòu)直線中確定目標(biāo)視頻幀的滅點直線；

根據(jù)目標(biāo)視頻幀的滅點直線確定相機姿態(tài)；

根據(jù)相機姿態(tài)將待融合對象融合至目標(biāo)視頻幀中。

在本申請的一種示例性實施例中，確定視頻文件中目標(biāo)視頻幀的結(jié)構(gòu)直線之前，上述方法還包括：

根據(jù)檢測到的視頻幀選取操作從視頻文件中確定出目標(biāo)視頻幀。

在本申請的一種示例性實施例中，確定視頻文件中目標(biāo)視頻幀的結(jié)構(gòu)直線，包括：

對目標(biāo)視頻幀進行特征提取得到目標(biāo)視頻幀的特征圖；

根據(jù)特征圖預(yù)測得到與目標(biāo)視頻幀對應(yīng)的直線連接點；

根據(jù)直線連接點生成結(jié)構(gòu)直線。

在本申請的一種示例性實施例中，根據(jù)直線連接點生成結(jié)構(gòu)直線，包括：

根據(jù)直線連接點預(yù)測參考結(jié)構(gòu)直線；

根據(jù)特征圖對參考結(jié)構(gòu)直線進行篩選，得到目標(biāo)視頻幀的結(jié)構(gòu)直線。

在本申請的一種示例性實施例中，根據(jù)目標(biāo)視頻幀的滅點直線確定相機姿態(tài)，包括：

根據(jù)目標(biāo)視頻幀中分別用于表征不同方向的滅點直線確定目標(biāo)視頻幀中用于表征不同方向的滅點；

根據(jù)用于表征不同方向的滅點以及相機內(nèi)參矩陣確定相機旋轉(zhuǎn)矩陣；

根據(jù)用于表征不同方向的滅點計算相機平移向量；

根據(jù)相機平移向量和相機旋轉(zhuǎn)矩陣計算相機姿態(tài)。

在本申請的一種示例性實施例中，根據(jù)目標(biāo)視頻幀中分別用于表征不同方向的滅點直線確定目標(biāo)視頻幀中用于表征不同方向的滅點，包括：

確定目標(biāo)視頻幀中分別用于表征不同方向的滅點直線分別對應(yīng)的直線方程；