[發明專利]對象融合方法、裝置、計算機可讀存儲介質及電子設備

有效

• 申請號: 202010601645.6
• 申請日: 2020-06-28
• 公開（公告）號: CN111652831B
• 公開（公告）日: 2022-04-19
• 發明（設計）人: 余自強
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06V20/40;G06V10/80;G06V10/82;G06K9/62;G06T7/70;G06N3/04;G06N3/08
• 代理公司: 深圳市隆天聯鼎知識產權代理有限公司 44232
• 代理人: 葉虹

1.一種對象融合方法，其特征在于，包括：

確定視頻文件中目標視頻幀的結構直線；

根據直線選取操作從所述結構直線中確定所述目標視頻幀的滅點直線；

根據所述目標視頻幀中分別用于表征不同方向的滅點直線確定所述目標視頻幀中用于表征不同方向的滅點；

所述用于表征不同方向的滅點分別用于表征x方向和y方向，根據相機內參矩陣、所述x方向的滅點以及預設調節因子確定所述x方向的參考向量；根據所述相機內參矩陣、所述y方向的滅點以及所述預設調節因子確定所述y方向的參考向量；計算所述x方向的參考向量與所述y方向的參考向量的叉乘結果；將所述x方向的參考向量、所述y方向的參考向量以及所述叉乘結果進行組合，得到相機旋轉矩陣；

根據所述用于表征不同方向的滅點計算相機平移向量；

根據所述相機平移向量和所述相機旋轉矩陣計算相機姿態；

根據所述相機姿態將待融合對象融合至所述目標視頻幀中。

2.根據權利要求1所述的方法，其特征在于，確定視頻文件中目標視頻幀的結構直線，包括：

對所述目標視頻幀進行特征提取得到所述目標視頻幀的特征圖；

根據所述特征圖預測得到與所述目標視頻幀對應的直線連接點；

根據所述直線連接點生成所述結構直線。

3.根據權利要求2所述的方法，其特征在于，根據所述直線連接點生成所述結構直線，包括：

根據所述直線連接點預測參考結構直線；

根據所述特征圖對所述參考結構直線進行篩選，得到所述目標視頻幀的結構直線。

4.根據權利要求1所述的方法，其特征在于，根據所述目標視頻幀中分別用于表征不同方向的滅點直線確定所述目標視頻幀中用于表征不同方向的滅點，包括：

確定所述目標視頻幀中分別用于表征不同方向的滅點直線分別對應的直線方程；

根據所述直線方程計算所述目標視頻幀中用于表征不同方向的滅點。

5.根據權利要求1所述的方法，其特征在于，根據所述用于表征不同方向的滅點計算相機平移向量，包括：

確定所述用于表征不同方向的滅點分別對應的坐標；

根據所述坐標計算單應矩陣并根據所述單應矩陣計算所述相機平移向量。

6.根據權利要求1所述的方法，其特征在于，若所述待融合對象為三維對象，根據所述相機姿態將待融合對象融合至所述目標視頻幀中，包括：

根據所述相機姿態對待融合對象進行維度轉換，維度轉換后的待融合對象為二維對象；

將所述維度轉換后的待融合對象融合至所述目標視頻幀中。

7.根據權利要求1所述的方法，其特征在于，根據所述相機姿態將待融合對象融合至所述目標視頻幀中之后，所述方法還包括：

根據所述目標視頻幀的滅點直線確定所述視頻文件中其他視頻幀的滅點直線；其中，所述其他視頻幀對應的時間點晚于所述目標視頻幀。

8.根據權利要求7所述的方法，其特征在于，根據所述目標視頻幀的滅點直線確定所述視頻文件中其他視頻幀的滅點直線，包括：

根據所述目標視頻幀的滅點直線確定所述其他視頻幀中的第一視頻幀的滅點直線；其中，所述第一視頻幀與所述目標視頻幀相鄰；

根據所述第一視頻幀的滅點直線確定所述其他視頻幀中的第二視頻幀的滅點直線，直到確定出所有所述其他視頻幀的滅點直線；

其中，所述第一視頻幀與所述目標視頻幀相鄰，所述第二視頻幀與所述第一視頻幀相鄰。

9.根據權利要求8所述的方法，其特征在于，根據所述目標視頻幀的滅點直線確定所述其他視頻幀中的第一視頻幀的滅點直線，包括：

確定所述第一視頻幀中的所有結構直線；

計算所述所有結構直線分別與所述目標視頻幀的滅點直線之間的距離；

將最短的距離對應的結構直線確定為所述第一視頻幀的滅點直線。