[發(fā)明專(zhuān)利]視頻處理方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202111280492.0
• 申請(qǐng)日: 2021-10-29
• 公開(kāi)（公告）號(hào): CN114005063A
• 公開(kāi)（公告）日: 2022-02-01
• 發(fā)明（設(shè)計(jì)）人: 磯部駿;陶鑫;戴宇榮
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京達(dá)佳互聯(lián)信息技術(shù)有限公司
• 主分類(lèi)號(hào): G06V20/40
• 分類(lèi)號(hào): G06V20/40;G06V10/82;G06N3/04;G06N3/08;G06T3/40
• 代理公司: 北京銘碩知識(shí)產(chǎn)權(quán)代理有限公司 11286
• 代理人: 王皎彤;曾世驍

1.一種視頻處理方法，其特征在于，包括：

獲取待處理視頻的當(dāng)前幀圖像的特征和當(dāng)前幀的前一幀圖像的特征；

確定所述當(dāng)前幀圖像的特征和所述前一幀圖像的特征的相關(guān)性；

基于所述相關(guān)性和所述前一幀圖像的隱層特征，確定所述當(dāng)前幀圖像和所述前一幀圖像的對(duì)齊特征，其中，所述前一幀圖像的隱層特征包括對(duì)所述前一幀圖像進(jìn)行處理的輸入層和輸出層之間的隱藏層的特征；

基于所述對(duì)齊特征對(duì)所述當(dāng)前幀圖像進(jìn)行處理。

2.根據(jù)權(quán)利要求1所述的視頻處理方法，其特征在于，確定所述當(dāng)前幀圖像和所述前一幀圖像的對(duì)齊特征的步驟包括：

基于所述當(dāng)前幀圖像的特征和所述前一幀圖像的特征的相關(guān)性確定所述當(dāng)前幀圖像和所述前一幀圖像中的相關(guān)性最大的位置；

基于所述相關(guān)性最大的位置對(duì)所述前一幀圖像的隱層特征進(jìn)行對(duì)齊操作，得到所述當(dāng)前幀圖像和所述前一幀圖像的對(duì)齊特征。

3.根據(jù)權(quán)利要求2所述的視頻處理方法，其特征在于，基于所述相關(guān)性最大的位置對(duì)所述前一幀圖像的隱層特征進(jìn)行對(duì)齊操作的步驟包括：

將所述相關(guān)性最大的位置作為索引，對(duì)所述前一幀圖像的隱層特征進(jìn)行遷移。

4.根據(jù)權(quán)利要求1所述的視頻處理方法，其特征在于，獲取待處理視頻的當(dāng)前幀圖像的特征和當(dāng)前幀的前一幀圖像的特征的步驟包括：

通過(guò)相同的特征提取網(wǎng)絡(luò)分別對(duì)所述當(dāng)前幀圖像和所述前一幀圖像進(jìn)行特征提取，得到所述當(dāng)前幀圖像的特征和所述前一幀圖像的特征。

5.根據(jù)權(quán)利要求1所述的視頻處理方法，其特征在于，確定所述當(dāng)前幀圖像的特征和所述前一幀圖像的特征的相關(guān)性的步驟包括：

計(jì)算所述當(dāng)前幀圖像的特征的范數(shù)，將所述當(dāng)前幀圖像的特征除以所述當(dāng)前幀圖像的特征的范數(shù)，得到第一特征；

計(jì)算所述前一幀圖像的特征的范數(shù)，將所述前一幀圖像的特征除以所述前一幀圖像的特征的范數(shù)，得到第二特征；

將第一特征和第二特征的內(nèi)積作為所述當(dāng)前幀圖像的特征和所述前一幀圖像的特征的相關(guān)性。

6.根據(jù)權(quán)利要求1所述的視頻處理方法，其特征在于，基于所述對(duì)齊特征對(duì)所述當(dāng)前幀圖像進(jìn)行處理的步驟包括：

將所述當(dāng)前幀圖像和所述對(duì)齊特征進(jìn)行拼接，得到拼接特征；

將所述拼接特征輸入到預(yù)設(shè)的卷積神經(jīng)網(wǎng)絡(luò)，得到所述當(dāng)前幀圖像的處理后的圖像和所述當(dāng)前幀圖像的隱層特征。

7.根據(jù)權(quán)利要求6所述的視頻處理方法，其特征在于，所述當(dāng)前幀圖像的處理后的圖像包括所述當(dāng)前幀圖像的超分辨處理圖像或所述當(dāng)前幀圖像的圖像增強(qiáng)處理圖像。

8.一種視頻處理裝置，其特征在于，包括：

特征獲取單元，被配置為獲取待處理視頻的當(dāng)前幀圖像的特征和當(dāng)前幀的前一幀圖像的特征；

相關(guān)性確定單元，被配置為確定所述當(dāng)前幀圖像的特征和所述前一幀圖像的特征的相關(guān)性；

特征對(duì)齊單元，被配置為基于所述相關(guān)性和所述前一幀圖像的隱層特征，確定所述當(dāng)前幀圖像和所述前一幀圖像的對(duì)齊特征，其中，所述前一幀圖像的隱層特征包括對(duì)所述前一幀圖像進(jìn)行處理的輸入層和輸出層之間的隱藏層的特征；和

圖像處理單元，被配置為基于所述對(duì)齊特征對(duì)所述當(dāng)前幀圖像進(jìn)行處理。

9.一種電子設(shè)備，其特征在于，包括：

處理器；

用于存儲(chǔ)所述處理器可執(zhí)行指令的存儲(chǔ)器；

其中，所述處理器被配置為執(zhí)行所述指令，以實(shí)現(xiàn)如權(quán)利要求1至7中任一項(xiàng)所述的視頻處理方法。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，當(dāng)所述計(jì)算機(jī)程序被電子設(shè)備的處理器執(zhí)行時(shí)，使得電子設(shè)備執(zhí)行如權(quán)利要求1至7中任一項(xiàng)所述的視頻處理方法。