[發(fā)明專利]一種人臉圖像增強(qiáng)方法、裝置、系統(tǒng)及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 201911060534.2
• 申請(qǐng)日: 2019-11-01
• 公開（公告）號(hào): CN111008935A
• 公開（公告）日: 2020-04-14
• 發(fā)明（設(shè)計(jì)）人: 楊駿鋒
• 申請(qǐng)（專利權(quán)）人: 北京邁格威科技有限公司
• 主分類號(hào): G06T5/00
• 分類號(hào): G06T5/00
• 代理公司: 北京市磐華律師事務(wù)所 11336
• 代理人: 高偉

本發(fā)明提供了一種人臉圖像增強(qiáng)方法、裝置、系統(tǒng)及存儲(chǔ)介質(zhì)，方法包括：對(duì)原始圖像進(jìn)行人臉檢測(cè)得到人臉檢測(cè)框；根據(jù)人臉檢測(cè)框和三維人臉模型，確定人臉檢測(cè)框中的人臉圖像所對(duì)應(yīng)的三維人臉信息；基于原始圖像和人臉三維模型，對(duì)原始圖像中的人臉圖像進(jìn)行處理，能充分利用人臉三維信息，提高圖像處理的準(zhǔn)確率，另外通過原始圖像進(jìn)行圖像處理可大大減少人臉失真模糊，有利于提升圖像處理效果。根據(jù)本發(fā)明的方法、裝置、系統(tǒng)及存儲(chǔ)介質(zhì)，基于原始圖像和人臉三維模型，對(duì)原始圖像中的人臉圖像進(jìn)行處理，能充分利用人臉三維信息，提高圖像處理的準(zhǔn)確率，另外通過原始圖像進(jìn)行圖像處理可大大減少人臉失真模糊，有利于提升圖像處理效果。

技術(shù)領(lǐng)域

本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，更具體地涉及基于人臉圖像增強(qiáng)的處理。

背景技術(shù)

人臉融合是指通過融合多幀的人臉信息，獲得信息量更多的人臉增強(qiáng)結(jié)果，包括噪聲減少、解析力提高、細(xì)節(jié)更豐富等等。現(xiàn)有人臉融合方法都是基于經(jīng)過圖像信號(hào)處理器(isp)處理的RGB圖像進(jìn)行融合，而經(jīng)過isp的RGB圖像已經(jīng)丟失了很多信息。此外，現(xiàn)有方法并沒有考慮原有人臉的形狀以及表情信息，這就會(huì)導(dǎo)致融合后的人臉與本人由于人臉形狀以及表情等因素影響，會(huì)導(dǎo)致人臉失真，又或者因?yàn)樽藨B(tài)估計(jì)錯(cuò)誤，導(dǎo)致融合后的人臉出錯(cuò)。

因此，現(xiàn)有技術(shù)中的人臉融合技術(shù)存在融合前信息丟失過多，融合后人臉失真模糊的問題。

發(fā)明內(nèi)容

考慮到上述問題而提出了本發(fā)明。本發(fā)明提供了一種人臉圖像增強(qiáng)方法、裝置、系統(tǒng)及計(jì)算機(jī)存儲(chǔ)介質(zhì)，基于原始圖像和人臉三維模型，對(duì)原始圖像中的人臉圖像進(jìn)行處理，能充分利用人臉三維信息，提高圖像處理的準(zhǔn)確率。

根據(jù)本發(fā)明的第一方面，提供了一種人臉圖像增強(qiáng)方法，包括：

對(duì)原始圖像進(jìn)行人臉檢測(cè)得到人臉檢測(cè)框；

根據(jù)所述人臉檢測(cè)框和三維人臉模型，確定所述人臉檢測(cè)框中的人臉圖像所對(duì)應(yīng)的三維人臉信息；

根據(jù)所述三維人臉信息對(duì)所述原始圖像進(jìn)行處理，得到輸出圖像。

根據(jù)本發(fā)明的第二方面，提供了一種人臉圖像增強(qiáng)裝置，包括：

人臉檢測(cè)模塊，用于對(duì)原始圖像進(jìn)行人臉檢測(cè)得到人臉檢測(cè)框；

三維人臉模塊，用于根據(jù)所述人臉檢測(cè)框和三維人臉模型，確定所述人臉檢測(cè)框中的人臉圖像所對(duì)應(yīng)的三維人臉信息；

融合模塊，用于根據(jù)所述三維人臉信息對(duì)所述原始圖像進(jìn)行處理，得到輸出圖像。

根據(jù)本發(fā)明的第三方面，提供了一種人臉圖像增強(qiáng)系統(tǒng)，包括存儲(chǔ)器、處理器及存儲(chǔ)在所述存儲(chǔ)器上且在所述處理器上運(yùn)行的計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)第一方面所述方法的步驟。

根據(jù)本發(fā)明的第四方面，提供了一種計(jì)算機(jī)存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，所述計(jì)算機(jī)程序被計(jì)算機(jī)執(zhí)行時(shí)實(shí)現(xiàn)第一方面所述方法的步驟。

根據(jù)本發(fā)明實(shí)施例的人臉圖像增強(qiáng)方法、裝置、系統(tǒng)及計(jì)算機(jī)存儲(chǔ)介質(zhì)，基于原始圖像和人臉三維模型，對(duì)原始圖像中的人臉圖像進(jìn)行處理，能充分利用人臉三維信息，提高圖像處理的準(zhǔn)確率，另外通過原始圖像進(jìn)行圖像處理可大大減少人臉失真模糊，有利于提升圖像處理效果。

附圖說明

通過結(jié)合附圖對(duì)本發(fā)明實(shí)施例進(jìn)行更詳細(xì)的描述，本發(fā)明的上述以及其它目的、特征和優(yōu)勢(shì)將變得更加明顯。附圖用來提供對(duì)本發(fā)明實(shí)施例的進(jìn)一步理解，并且構(gòu)成說明書的一部分，與本發(fā)明實(shí)施例一起用于解釋本發(fā)明，并不構(gòu)成對(duì)本發(fā)明的限制。在附圖中，相同的參考標(biāo)號(hào)通常代表相同部件或步驟。

圖1是用于實(shí)現(xiàn)根據(jù)本發(fā)明實(shí)施例的人臉圖像增強(qiáng)方法和裝置的示例電子設(shè)備的示意性框圖；