[發明專利]視頻去模糊方法、裝置、設備及存儲介質

有效

• 申請號: 202111387449.4
• 申請日: 2021-11-22
• 公開（公告）號: CN113822824B
• 公開（公告）日: 2022-02-25
• 發明（設計）人: 江邦睿;謝植淮;李松南
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06N3/04
• 代理公司: 北京勵誠知識產權代理有限公司 11647
• 代理人: 周慧云

1.一種視頻去模糊方法，其特征在于，包括：

獲取視頻中的當前圖像，以及所述當前圖像的N個鄰近圖像，所述N為正整數；

提取所述當前圖像在M個尺度下的第一特征信息，以及所述N個鄰近圖像中每一個鄰近圖像在所述M個尺度下的第二特征信息，所述M為正整數；

針對所述N個鄰近圖像中的每一個鄰近圖像，將所述鄰近圖像在所述M個尺度下的第二特征信息分別與所述M個尺度下的第一特征信息對齊；

根據所述N個鄰近圖像中每一個鄰近圖像在所述M個尺度下對齊后的第二特征信息，得到去模糊后的當前圖像；

其中，所述將所述鄰近圖像在所述M個尺度下的第二特征信息分別與所述M個尺度下的第一特征信息對齊，包括：針對所述M個尺度下的第i個尺度，根據所述第i個尺度下的第二特征信息和第一特征信息，得到所述第i個尺度下的第二特征信息與第一特征信息之間的目標偏置量，所述i為從1到M的正整數；根據所述第i個尺度下的目標偏置量，得到所述鄰近圖像在所述第i個尺度下與所述第一特征信息對齊后的第二特征信息；

其中，所述根據所述第i個尺度下的第二特征信息和第一特征信息，得到所述第i個尺度下的第二特征信息與第一特征信息之間的目標偏置量，包括：將所述第i個尺度下的第二特征信息和第一特征信息進行級聯后，輸入第i個感受野模塊中，得到所述第i個感受野模塊輸出的所述第i個尺度下第二特征信息與第一特征信息之間的第一偏置量；根據所述第i個尺度下的第一偏置量，確定所述第i個尺度下的目標偏置量；

若i=1時，第一個感受野模塊包括第一感受野單元，若i大于1時，則所述第i個感受野模塊包括i個不同的感受野單元和第一卷積層；對應的，所述將所述第i個尺度下的第二特征信息和第一特征信息進行級聯后，輸入第i個感受野模塊中，得到所述第i個感受野模塊輸出的所述第i個尺度下第二特征信息與第一特征信息之間的第一偏置量，包括：

若i=1時，則將第一個尺度下的第二特征信息和第一特征信息進行級聯后，輸入所述第一感受野單元中，得到所述第一感受野單元輸出的第一偏置量；

若i大于1時，則將所述第i個尺度下的第二特征信息和第一特征信息進行級聯后，分別輸入所述i個不同的感受野單元中，得到所述i個不同的感受野單元中每個感受野單元輸出的偏置量；將所述i個不同的感受野單元中每個感受野單元輸出的偏置量進行級聯后，輸入所述第一卷積層中，得到所述第一卷積層輸出的所述第i個尺度下的第一偏置量。

2.根據權利要求1所述的方法，其特征在于，所述第i個感受野模塊的感受野大小與其他尺度對應的感受野模塊的感受野大小一致，所述其他尺度為所述M個尺度中除所述第i個尺度外的其他尺度。

3.根據權利要求2所述的方法，其特征在于，所述i個不同感受野單元中，第i個感受野單元對應的感受野大小是基于第i-1個感受野單元對應的感受野大小和所述第i個尺度對應的下采樣信息確定的。

4.根據權利要求3所述的方法，其特征在于，若i=3，則所述第i個感受野模塊包括第一感受野單元、第二感受野單元和第三感受野單元，所述第一感受野單元包括至少一個卷積層，所述第二感受野單元和所述第三感受野單元中的至少一個感受野單元包括至少一個空洞卷積層。

5.根據權利要求1-4任一項所述的方法，其特征在于，所述根據所述第i個尺度下的第一偏置量，確定所述第i個尺度下的目標偏置量，包括：

若i=1時，則將第一個尺度下的第一偏置量，確定為所述第一個尺度下的目標偏置量；

若i大于1時，則獲取所述鄰近圖像在第i-1個尺度下的第二特征信息與第一特征信息之間的目標偏置量，并根據所述第i-1個尺度下的目標偏置量和所述第i個尺度下的第一偏置量，確定所述第i個尺度下的目標偏置量。

6.根據權利要求5所述的方法，其特征在于，所述根據所述第i-1個尺度下的目標偏置量和所述第i個尺度下的第一偏置量，確定所述第i個尺度下的目標偏置量，包括：

將所述第i-1個尺度下的目標偏置量與所述第i個尺度下的第一偏置量進行級聯后，輸入第二卷積層，得到所述第二卷積層輸出的所述第i個尺度下的目標偏置量。