[發明專利]圖像處理、模型訓練方法、裝置、計算機設備和存儲介質

有效

• 申請號: 202010169373.7
• 申請日: 2020-03-12
• 公開（公告）號: CN111401216B
• 公開（公告）日: 2023-04-18
• 發明（設計）人: 曹赟;倪輝;陳旭;朱俊偉;邰穎;葛彥昊;汪鋮杰;李季檁
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/80;G06V10/82;G06N3/0464;G06N3/088;G06N3/09;G06N20/00;G06T3/00;G06T5/00;G06T9/00
• 代理公司: 華進聯合專利商標代理有限公司 44224
• 代理人: 李文淵;曹瀚青

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取初始面部圖像和模板面部圖像；

分別對所述初始面部圖像和所述模板面部圖像進行編碼，得到所述初始面部圖像的面部身份特征和所述模板面部圖像的屬性特征；

對所述初始面部圖像和所述模板面部圖像共同編碼，得到所述初始面部圖像和所述模板面部圖像共同對應的共同編碼特征；

融合所述面部身份特征、所述屬性特征和所述共同編碼特征得到目標特征；

解碼所述目標特征，得到目標面部圖像；所述目標面部圖像與所述初始面部圖像的面部身份特征匹配、且與所述模板面部圖像的屬性特征匹配。

2.根據權利要求1所述的方法，其特征在于，所述獲取初始面部圖像和模板面部圖像，包括：

獲取初始圖像和模板圖像；

分別對所述初始圖像和所述模板圖像進行面部特征點對齊，定位所述初始圖像和所述模板圖像中的面部區域；

按照所述初始圖像中定位的面部區域截取初始面部圖像，并按照所述模板圖像中定位的面部區域截取模板面部圖像。

3.根據權利要求2所述的方法，其特征在于，所述方法還包括：

將所述目標面部圖像反向回貼至所述模板圖像中的面部區域，得到目標圖像；所述目標圖像保持了所述初始圖像中面部區域的面部身份特征和所述模板圖像中面部區域的屬性特征。

4.根據權利要求1所述的方法，其特征在于，所述分別對所述初始面部圖像和所述模板面部圖像進行編碼，得到所述初始面部圖像的面部身份特征和所述模板面部圖像的屬性特征，包括：

通過第一編碼模型對所述初始面部圖像單獨進行編碼，得到所述初始面部圖像的面部身份特征；所述第一編碼模型根據通用圖像樣本訓練所得；

通過異于所述第一編碼模型的第二編碼模型對所述模板面部圖像單獨進行編碼，得到所述模板面部圖像的屬性特征；所述第二編碼模型根據無監督圖像樣本和有監督圖像樣本交迭訓練所得。

5.根據權利要求4所述的方法，其特征在于，所述通過第一編碼模型對所述初始面部圖像單獨進行編碼，得到所述初始面部圖像的面部身份特征，包括：

將所述初始面部圖像的初始顏色通道特征矩陣輸入第一編碼模型；

通過所述第一編碼模型對所述初始顏色通道特征矩陣進行處理，輸出所述初始面部圖像的面部身份特征向量；

所述通過異于所述第一編碼模型的第二編碼模型對所述模板面部圖像單獨進行編碼，得到所述模板面部圖像的屬性特征，包括：

將所述模板面部圖像的模板顏色通道特征矩陣輸入第二編碼模型；

通過所述第二編碼模型對所述模板顏色通道特征矩陣進行處理，輸出所述模板面部圖像的屬性特征向量；

其中，所述第一編碼模型與所述第二編碼模型的模型參數相異。

6.根據權利要求4所述的方法，其特征在于，所述對所述初始面部圖像和所述模板面部圖像共同編碼，得到所述初始面部圖像和所述模板面部圖像共同對應的共同編碼特征，包括：

通過第三編碼模型，對所述初始面部圖像和所述模板面部圖像共同進行編碼，得到所述初始面部圖像和所述模板面部圖像共同對應的共同編碼特征；

其中，所述第三編碼模型與所述第二編碼模型，通過交迭使用無監督圖像樣本和有監督圖像樣本聯合訓練所得。

7.根據權利要求6所述的方法，其特征在于，所述融合所述面部身份特征、所述屬性特征和所述共同編碼特征得到目標特征，包括：

通過特征融合模型對所述面部身份特征、所述屬性特征和所述共同編碼特征進行融合處理，得到目標特征；

所述解碼所述目標特征，得到目標面部圖像，包括：

通過解碼模型對所述目標特征解碼，得到目標面部圖像；

其中，所述特征融合模型、所述解碼模型、所述第三編碼模型與所述第二編碼模型，通過交迭使用無監督圖像樣本和有監督圖像樣本聯合訓練所得。