[發明專利]圖像處理方法及裝置、電子設備和存儲介質

在審

• 申請號: 202210106768.1
• 申請日: 2022-01-28
• 公開（公告）號: CN114445313A
• 公開（公告）日: 2022-05-06
• 發明（設計）人: 李甫
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;H04N5/232
• 代理公司: 北京市漢坤律師事務所 11602
• 代理人: 姜浩然;吳麗麗

本公開提供了一種圖像處理方法及裝置、電子設備和存儲介質，涉及人工智能領域，尤其涉及計算機視覺、圖像處理和深度學習技術。實現方案為：獲取待處理圖像和分別對應于多個拍攝時間的多個風格圖像；獲取待處理圖像中的內容特征編碼；獲取分別對應于多個風格圖像的多個風格特征編碼；對多個風格特征編碼中的每個風格特征編碼，分別結合內容特征編碼進行解碼處理，以獲取相應于多個拍攝時間的多個第一圖像；以及基于多個拍攝時間的時間順序，連續播放多個第一圖像，以獲取第一視頻。

技術領域

本公開涉及人工智能領域，尤其涉及計算機視覺、圖像處理和深度學習技術，具體涉及一種圖像處理的方法、裝置、電子設備、計算機可讀存儲介質和計算機程序產品。

背景技術

人工智能是研究使計算機來模擬人的某些思維過程和智能行為(如學習、推理、思考、規劃等)的學科，既有硬件層面的技術也有軟件層面的技術。人工智能硬件技術一般包括如傳感器、專用人工智能芯片、云計算、分布式存儲、大數據處理等技術；人工智能軟件技術主要包括計算機視覺技術、語音識別技術、自然語言處理技術以及機器學習/深度學習、大數據處理技術、知識圖譜技術等幾大方向。

圖像風格遷移又稱圖像風格轉換、圖像風格化處理等，是指將一張風格圖像中的色調和紋理風格遷移到一張內容圖像上，同時保存內容圖像的結構。

在此部分中描述的方法不一定是之前已經設想到或采用的方法。除非另有指明，否則不應假定此部分中描述的任何方法僅因其包括在此部分中就被認為是現有技術。類似地，除非另有指明，否則此部分中提及的問題不應認為在任何現有技術中已被公認。

發明內容

本公開提供了一種圖像處理的方法、裝置、電子設備、計算機可讀存儲介質和計算機程序產品。

根據本公開的一方面，提供了一種圖像處理方法，包括：獲取待處理圖像和分別對應于多個拍攝時間的多個風格圖像；獲取待處理圖像中的內容特征編碼；獲取分別對應于多個風格圖像的多個風格特征編碼，其中，多個風格特征編碼中的每個風格特征編碼包括用于表征相應的風格圖像的拍攝時間的圖像色調和圖像紋理的特征信息；對多個風格特征編碼中的每個風格特征編碼，分別結合內容特征編碼進行解碼處理，以獲取相應于多個拍攝時間的多個第一圖像；以及基于多個拍攝時間的時間順序，連續播放多個第一圖像，以獲取第一視頻。

根據本公開的另一方面，提供了一種圖像處理模型的訓練方法，包括：獲取樣本數據集，其中，樣本數據集中的每個樣本數據包括內容圖像和風格圖像；初始化圖像處理模型的多個參數；以及對于每個樣本數據，執行下述操作：分別基于第一內容編碼網絡和第一風格編碼網絡，獲取內容圖像的第一內容特征編碼和第一風格特征編碼，其中，第一風格特征編碼包括用于表征內容圖像的拍攝時間的圖像色調和圖像紋理的特診信息；分別基于第二內容編碼網絡和第二風格編碼網絡，獲取風格圖像的第二內容特征編碼和第二風格特征編碼，其中，第二風格特征編碼包括用于表征風格圖像的拍攝時間的圖像色調和圖像紋理的特征信息；將第一內容特征編碼和第二風格特征編碼輸入第一解碼網絡，以獲取第一融合圖像；將第二內容特征編碼和第一風格特征編碼輸入第二解碼網絡，以獲取第二融合圖像；分別基于第三內容編碼網絡和第三風格編碼網絡，獲取第一融合圖像的第三內容特征編碼和第三風格特征編碼，其中，第三風格特征編碼包括用于表征第一融合圖像所反映的時間的圖像色調和圖像紋理的特征信息；分別基于第四內容編碼網絡和第四風格編碼網絡，獲取第二融合圖像的第四內容特征編碼和第四風格特征編碼，其中，第四風格特征編碼包括用于表征第二融合圖像所反映的時間的圖像色調和圖像紋理的特征信息；將第三內容特征編碼和第四風格特征編碼輸入第三解碼網絡，以獲取第三融合圖像；將第四內容特征編碼和第三風格特征編碼輸入第四解碼網絡，以獲取第四融合圖像；以及基于內容圖像、風格圖像以及第三融合圖像、第四融合圖像，調整圖像處理模型的多個參數。