[發明專利]視頻處理方法、裝置、電子設備和介質在審
| 申請號： | 202210107908.7 | 申請日： | 2022-01-28 |
| 公開（公告）號： | CN114494524A | 公開（公告）日： | 2022-05-13 |
| 發明（設計）人： | 劉芳龍;李鑫;何棟梁 | 申請（專利權）人： | 北京百度網訊科技有限公司 |
| 主分類號： | G06T11/40 | 分類號： | G06T11/40 |
| 代理公司： | 北京市漢坤律師事務所 11602 | 代理人： | 姜浩然;吳麗麗 |
| 地址： | 100085 北京市*** | 國省代碼： | 北京;11 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 視頻 處理 方法 裝置 電子設備 介質 | ||
1.一種視頻處理方法，包括：
獲取待著色視頻的連續多個幀和彩色參考圖像；以及
針對所述多個幀中的每個幀：
基于所述參考圖像，對該幀進行預著色；
對經預著色的幀進行特征提取，以獲取第一特征；
將該幀的第一特征與至少一個相鄰幀的第一特征進行合并，以獲取合并特征；以及
基于所述合并特征，獲取最終著色結果。
2.根據權利要求1所述的方法，其中，基于所述參考圖像，對該幀進行預著色包括：
對所述彩色參考圖像進行特征提取，以獲取參考圖像特征；
對該幀進行特征提取，以獲取第二特征；
確定所述參考圖像特征與所述第二特征之間的映射；以及
根據所述映射，將所述參考圖像中的色彩信息映射至該幀中，以對該幀進行預著色。
3.根據權利要求1所述的方法，其中，將該幀的第一特征與至少一個相鄰幀的第一特征進行合并包括：
確定該幀與所述至少一個相鄰幀之間的光流信息；
根據所述光流信息，將所述至少一個相鄰幀的第一特征轉換至該幀；以及
將該幀的第一特征與經轉換的至少一個相鄰幀的第一特征在特征通道維度進行合并。
4.根據權利要求1至3中任一項所述的方法，其中，將該幀的第一特征與至少一個相鄰幀的第一特征進行合并包括：
將該幀的第一特征與前后相鄰各幀的第一特征進行合并。
5.根據權利要求1至3中任一項所述的方法，還包括：對所述合并特征進行特征融合，并且
其中，基于所述合并特征，獲取最終著色結果包括：對融合后的特征進行解碼，以獲取所述最終著色結果。
6.根據權利要求1至3中任一項所述的方法，其中，所述彩色參考圖像是Lab色彩空間的彩色圖像。
7.一種視頻處理裝置，包括：獲取單元、預著色單元、特征提取單元、特征合并單元以及最終著色單元，其中，
所述獲取單元被配置為獲取待著色視頻的連續多個幀和彩色參考圖像；并且
針對所述多個幀中的每個幀：
所述預著色單元被配置為基于所述參考圖像，對該幀進行預著色；
所述特征提取單元被配置為對經預著色的幀進行特征提取，以獲取第一特征；
所述特征合并單元被配置為將該幀的第一特征與至少一個相鄰幀的第一特征進行合并，以獲取合并特征；
所述最終著色單元被配置為基于所述合并特征，獲取最終著色結果。
8.根據權利要求7所述的裝置，其中，所述預著色單元被進一步配置為：
對所述彩色參考圖像進行特征提取，以獲取參考圖像特征；
對該幀進行特征提取，以獲取第二特征；
確定所述參考圖像特征與所述第二特征之間的映射；以及
根據所述映射，將所述參考圖像中的色彩信息映射至該幀中，以對該幀進行預著色。
9.根據權利要求7所述的裝置，其中，所述特征合并單元被進一步配置為：
確定該幀與所述至少一個相鄰幀之間的光流信息；
根據所述光流信息，將所述至少一個相鄰幀的第一特征轉換至該幀；以及
將該幀的第一特征與經轉換的至少一個相鄰幀的第一特征在特征通道維度進行合并。
10.根據權利要求7至9中任一項所述的裝置，其中，所述特征合并單元被進一步配置為：
將該幀的第一特征與前后相鄰各幀的第一特征進行合并。
11.根據權利要求7至9中任一項所述的裝置，還包括特征融合單元，所述特征融合單元被配置為對所述合并特征進行特征融合，并且
其中，所述最終著色單元被進一步配置為：對融合后的特征進行解碼，以獲取所述最終著色結果。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于北京百度網訊科技有限公司，未經北京百度網訊科技有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202210107908.7/1.html，轉載請聲明來源鉆瓜專利網。
