[發(fā)明專利]視頻插值幀的生成方法、裝置及電子設備

在審

• 申請?zhí)枺?/td>: 202110819047.0
• 申請日: 2021-07-20
• 公開（公告）號: CN113556581A
• 公開（公告）日: 2021-10-26
• 發(fā)明（設計）人: 黃海鷗;李江城;梁丕樹;夏群兵
• 申請（專利權）人: 深圳市愛協(xié)生科技有限公司
• 主分類號: H04N21/2343
• 分類號: H04N21/2343;H04N21/4402
• 代理公司: 北京科家知識產(chǎn)權代理事務所(普通合伙) 11427
• 代理人: 宮建華

1.一種視頻插值幀的生成方法，其特征在于，包括：

確定第一幀圖像中的當前塊的第一位置坐標，第二幀圖像中與所述當前塊對應的匹配塊的第二位置坐標；

根據(jù)所述第一位置坐標和所述第二位置坐標構建運動模型，所述運動模型用于指示所述當前塊相對所述匹配塊的運動軌跡；

根據(jù)所述待插值幀相對所述目標幀圖像的插入位置，確定目標時刻，所述目標幀圖像為第一幀圖像或第二幀圖像；

將所述目標時刻作為所述運動模型的輸入?yún)?shù)，確定與所述當前塊對應的待插值塊在待插值幀中的位置；

其中，所述第一幀圖像和所述第二幀圖像為待處理視頻中相鄰的兩幀圖像，所述第二幀圖像位于所述第一幀圖像之后。

2.根據(jù)權利要求1所述的視頻插值幀的生成方法，其特征在于，所述根據(jù)所述第一位置坐標和所述第二位置坐標構建運動模型包括：

根據(jù)位置參數(shù)、速度參數(shù)、加速度參數(shù)和時間參數(shù)構建二階多項式；

根據(jù)所述第一位置坐標，所述第二位置坐標構建運動模型得到所述二階多項式中所述速度參數(shù)的速度參數(shù)值和加速度參數(shù)的加速度參數(shù)值；

將所述速度參數(shù)值代替所述速度參數(shù)，所述加速度參數(shù)值代替所述加速度參數(shù)得到所述運動模型。

3.根據(jù)權利要求1所述的視頻插值幀的生成方法，其特征在于，在所述確定第一幀圖像中的當前塊的第一位置坐標，第二幀圖像中與所述當前塊對應的匹配塊的第二位置坐標之前，所述方法還包括：

根據(jù)所述當前塊的運動向量得到第一位置坐標及所述匹配塊的第二位置坐標。

4.根據(jù)權利要求3所述的視頻插值幀的生成方法，其特征在于，在所述根據(jù)所述當前塊的運動向量得到第一位置坐標及所述匹配塊的第二位置坐標之前，所述方法還包括：

將所述第一幀圖像的多個層及所述第二幀圖像的多個層分別劃分為數(shù)量不同的宏塊，其中，所述第一幀圖像與所述第二幀圖像對應的層的宏塊的數(shù)量相同；

對各宏塊進行單邊運動向量估計，得到各宏塊的運動向量，所述宏塊包括所述當前塊。

5.根據(jù)權利要求4所述的視頻插值幀的生成方法，其特征在于，還包括：

所述第一幀圖像與所述第二幀圖像從頂層到底層劃分的宏塊的數(shù)量依次增加。

6.根據(jù)權利要求4所述的視頻插值幀的生成方法，其特征在于，所述對各宏塊進行單邊運動向量估計，得到各宏塊的運動向量，包括：

獲取各宏塊之間的相對位置信息與色度信息；

將所述各宏塊之間的相對位置信息和色度信息作為所述單邊運動向量估計的參數(shù)，得到各宏塊的運動向量。

7.根據(jù)權利要求3所述的視頻插值幀的生成方法，其特征在于，在所述根據(jù)所述當前塊的運動向量得到第一位置坐標及所述匹配塊的第二位置坐標之后，所述方法還包括：

若所述當前塊具有多個與所述當前塊匹配的匹配塊或所述當前塊不具有與所述當前塊匹配的匹配塊，則將所述當前塊所在區(qū)域確定為異常區(qū)域；

若所述當前塊具有一個與所述當前塊匹配的匹配塊，則所述當前塊所在區(qū)域為正常區(qū)域；

根據(jù)所述第一幀圖像中正常區(qū)域和異常區(qū)域的分布情況得到目標矩陣；

在所述確定與所述當前塊對應的待插值塊在待插值幀中的位置之后，所述方法還包括：

生成待插值幀，所述待插值幀的所述位置包括所述待插值塊；

基于所述目標矩陣和稀疏采樣模型處理所述待插值幀，得到目標待插值幀；

將所述目標待插值幀插入所述第一幀圖像與所少數(shù)第二幀圖像之間。