[發明專利]對圖像執行對象照明操縱的方法和裝置

在審

• 申請號: 201980044340.5
• 申請日: 2019-07-31
• 公開（公告）號: CN112384928A
• 公開（公告）日: 2021-02-19
• 發明（設計）人: 謝爾蓋·斯坦尼斯拉沃維奇·扎瓦利申;弗拉基米爾·根納季耶維奇·庫爾曼諾夫;阿爾捷姆·謝爾蓋耶維奇·米古金;伊萬·奧列戈維奇·卡拉查洛夫;阿列克謝·米哈伊洛維奇·格魯茲杰夫;德米特里·瓦列里耶維奇·波盧博特科;伊利亞·瓦西里耶維奇·庫里林
• 申請（專利權）人: 三星電子株式會社
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/46;G06T5/00
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 吳曉兵

1.一種對第一圖像執行對象照明操縱操作的方法，所述方法包括：

接收所述第一圖像和光方向輸入；

生成具有從所述第一圖像檢測到的第一對象的第二圖像；

基于所述光方向確定所述第二圖像的第二對象照明；以及

用所述第二對象照明替換所述第一圖像的第一對象照明。

2.根據權利要求1所述的方法，其中確定所述第二對象照明包括：

將通用3D網格擬合到所述第二圖像中的第二對象；以及

基于所述光方向和所述第二對象生成所述第二對象照明。

3.根據權利要求2所述的方法，其中確定所述第二對象照明還包括：

調整所述第二對象照明的尺寸以對應于所述第二圖像的尺寸；

在調整了所述第二對象照明的尺寸之后，基于所述第二圖像的亮度和色彩調節所述第二對象照明；以及

在調節了所述第二對象照明之后，使所述第二對象照明平滑化。

4.根據權利要求3所述的方法，其中調節所述第二對象照明包括：

計算所述第二對象照明的Y、U和V直方圖；

計算所述第二圖像的Y、U和V直方圖；

使所述第二對象照明的U和V直方圖與所述第二圖像的U和V直方圖均衡化；

利用所述第二圖像和所述第二對象照明的Y直方圖調節所述第二對象照明；以及

將所述第二對象照明和所述第二圖像的經均衡化的U和V直方圖應用于所述第二對象照明。

5.根據權利要求1所述的方法，其中替換所述第一對象照明包括：

基于所述第一對象和來自所述第二圖像的陰影，從對象表面掩模檢測斑點；

基于所述斑點，生成λ圖，所述λ圖表示與最大平滑化相對應的至少一個區域、與最小平滑化相對應的至少一個區域以及與從所述最大平滑化到所述最小平滑化的范圍內的平滑化相對應的零個或多個區域；以及

利用所述λ圖提取實際對象照明。

6.根據權利要求5所述的方法，其中提取所述實際對象照明包括：將具有所述λ圖的特征導向的快速全局平滑化FGS濾波器應用于所述第二圖像，以生成所述實際對象照明。

7.根據權利要求5所述的方法，還包括：

基于所述第一對象生成對象掩模；

根據所述對象掩模和所述第二圖像估計色彩因數；以及

基于所述色彩因數找到對象表面區域。

8.根據權利要求7所述的方法，其中替換所述第一對象照明包括：

在所述對象表面掩模上執行穩定的FGS，以獲得對象表面平滑掩模。

9.根據權利要求8所述的方法，其中替換所述第一對象照明還包括：

基于所述第一圖像中的所述第一對象的特征估計對象檢測失敗的概率；以及

基于所述對象表面平滑掩模和所述對象檢測失敗的概率，將所述第一圖像恢復到所述第一對象照明。

10.根據權利要求5所述的方法，

其中所述第一對象是臉部，

其中所述第一對象的表面是臉部皮膚，并且

其中所述斑點包括眉毛、眼睛、鼻子或嘴巴中的至少一個。

11.一種用于對第一圖像執行對象照明操縱操作的設備，所述設備包括：

輸入接口，被配置成接收所述第一圖像和光方向輸入；以及

處理器，被配置成：

生成具有從所述第一圖像檢測到的第一對象的第二圖像；

基于所述光方向確定所述第二圖像的第二對象照明；以及

用所述第二對象照明替換所述第一圖像的第一對象照明。

12.根據權利要求11所述的設備，其中所述處理器還被配置成：

將通用3D網格擬合到所述第二圖像中的第二對象，以及

通過使用所述光方向和所述第二對象獲得所述第二對象照明。