[發(fā)明專利]對(duì)圖像執(zhí)行對(duì)象照明操縱的方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201980044340.5
• 申請(qǐng)日: 2019-07-31
• 公開(kāi)（公告）號(hào): CN112384928A
• 公開(kāi)（公告）日: 2021-02-19
• 發(fā)明（設(shè)計(jì)）人: 謝爾蓋·斯坦尼斯拉沃維奇·扎瓦利申;弗拉基米爾·根納季耶維奇·庫(kù)爾曼諾夫;阿爾捷姆·謝爾蓋耶維奇·米古金;伊萬(wàn)·奧列戈維奇·卡拉查洛夫;阿列克謝·米哈伊洛維奇·格魯茲杰夫;德米特里·瓦列里耶維奇·波盧博特科;伊利亞·瓦西里耶維奇·庫(kù)里林
• 申請(qǐng)（專利權(quán)）人: 三星電子株式會(huì)社
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/46;G06T5/00
• 代理公司: 中科專利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 吳曉兵

提供了一種對(duì)第一圖像執(zhí)行對(duì)象照明操縱操作的方法和照明操縱設(shè)備。該方法包括：接收第一圖像和光方向輸入；生成具有從第一圖像檢測(cè)到的第一對(duì)象的第二圖像；基于光方向確定第二圖像的第二對(duì)象照明；以及用第二對(duì)象照明替換第一圖像的第一對(duì)象照明。

技術(shù)領(lǐng)域

本公開(kāi)涉及對(duì)圖像中對(duì)象的照明的操縱。更具體地，本公開(kāi)涉及一種對(duì)圖像序列中的圖像執(zhí)行對(duì)象照明操縱的方法以及實(shí)現(xiàn)該方法的用戶計(jì)算設(shè)備。

背景技術(shù)

圖1是示出根據(jù)相關(guān)技術(shù)的對(duì)圖像執(zhí)行對(duì)象照明操縱的一般操作。

用于操縱圖像中的對(duì)象的照明的方法通常包括：在操作S10中輸入對(duì)象圖像，在操作S11中檢測(cè)對(duì)象界標(biāo)，在操作S12中提取對(duì)象反照率和照明，在操作S13中改變對(duì)象照明，在操作S14中將對(duì)象反照率和改變后的照明混合，以及在操作S15中將經(jīng)混合的對(duì)象反照率和改變后的照明施加到對(duì)象圖像。

三菱電機(jī)研究所的題為“用于定向照明的歸一化的臉部補(bǔ)亮(Face relightingfor normalization of directional lighting)”的2008年1月29日的美國(guó)專利US 7,324,688 B2描述了一種使用逐塊優(yōu)化算法執(zhí)行照明操縱以提取反照率和照明圖以進(jìn)一步進(jìn)行臉部照明歸一化的方法。該′688號(hào)專利中公開(kāi)的方法的主要缺點(diǎn)是由于將照明操縱方法應(yīng)用于臉部圖像而導(dǎo)致獨(dú)特的臉部特征發(fā)生了變化。由此，圖像上的已經(jīng)受了這種照明操縱方法的臉部變得類似于用于這種照明操縱的參考臉部。

數(shù)碼光學(xué)歐洲有限公司(DIGITALOPTICS CORPORATION EUROPE LIMIT)等的題為“基于紋理空間分解在統(tǒng)計(jì)臉部建模中分離定向照明可變性(Separating directionallighting variability in statistical face modeling based on texture spacedecomposition)”的2013年11月12日的另一項(xiàng)美國(guó)專利US 8,582,896 B2描述了一種使用通用臉部模型將圖像分解為反照率和照明的方法，其中該通用臉部模型是通過(guò)將主成分分析(PCA)投影到在任意圖像數(shù)據(jù)庫(kù)上訓(xùn)練的均勻光子空間(Uniform Light Subspace)而創(chuàng)建的。根據(jù)該′896號(hào)專利的描述，這種方法只能在一定程度上消除照明。此外，該′896號(hào)專利的方法無(wú)法消除彩色照明，并且不能設(shè)計(jì)為以高分辨率處理臉部圖像。

微軟公司的題為“臉部圖像處理(Facial image processing)”的2008年10月7日的另一項(xiàng)美國(guó)專利US 7,433,807 B2描述了一種處理臉部圖像的方法，該方法使用若干個(gè)閃光燈創(chuàng)建3D臉部模型，并基于3D模型法線將反照率與照明分開(kāi)。該′807號(hào)專利中教示的方法需要無(wú)法集成到用戶移動(dòng)設(shè)備中的大量硬件。此外，該′807號(hào)專利中公開(kāi)的算法必須分析若干個(gè)不同的圖像，因此，它的計(jì)算量很大并且不能實(shí)時(shí)實(shí)現(xiàn)。

ANTHROPICS技術(shù)有限公司的題為“圖像操縱(Image manipulation)”的2018年1月2日的另一項(xiàng)美國(guó)專利US 9,858,654 B2描述了一種處理圖像的方法，該方法形成了基于PCA的2D模型，該模型與輸入的臉部圖像融合以產(chǎn)生具有基于PCA系數(shù)進(jìn)行控制的新照明的輸出圖像。該′654號(hào)專利中公開(kāi)的方法不能去除刺眼的陰影，并且導(dǎo)致改變圖像中獨(dú)特的臉部特征。此外，該′654號(hào)專利中提出的方法相當(dāng)慢(由于使用了相應(yīng)的PortraitPro軟件)，因此不能在實(shí)時(shí)應(yīng)用中使用。

其它實(shí)現(xiàn)方式在本領(lǐng)域中是已知的，但是不能充分解決上述問(wèn)題。

以上信息僅作為背景信息呈現(xiàn)，以幫助理解本公開(kāi)。沒(méi)有確定也沒(méi)有斷言以上內(nèi)容中的任何內(nèi)容是否可以用作關(guān)于本公開(kāi)的現(xiàn)有技術(shù)。

發(fā)明內(nèi)容

問(wèn)題的解決方案