[發(fā)明專利]人臉摳圖方法、系統(tǒng)、電子裝置及存儲(chǔ)介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011581223.3
• 申請日: 2020-12-28
• 公開（公告）號(hào): CN112541484A
• 公開（公告）日: 2021-03-23
• 發(fā)明（設(shè)計(jì)）人: 洪叁亮;賴眾程
• 申請（專利權(quán)）人: 平安銀行股份有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06T7/00;G06T3/00;G06T7/187
• 代理公司: 深圳市沃德知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44347
• 代理人: 高杰;于志光

1.一種人臉摳圖方法，其特征在于，所述方法包括：

通過訓(xùn)練好的人臉定位網(wǎng)絡(luò)模型對目標(biāo)圖像進(jìn)行人臉檢測，得到人臉旋轉(zhuǎn)角和人臉坐標(biāo)；

根據(jù)所述人臉旋轉(zhuǎn)角和所述人臉坐標(biāo)構(gòu)建原始三角形和目標(biāo)三角形；及

根據(jù)所述原始三角形和所述目標(biāo)三角形基于仿射變換實(shí)現(xiàn)從所述目標(biāo)圖像中的人臉摳圖，得到人臉圖像。

2.如權(quán)利要求1所述的方法，其特征在于，所述通過訓(xùn)練好的人臉定位網(wǎng)絡(luò)模型對目標(biāo)圖像進(jìn)行人臉檢測，得到人臉旋轉(zhuǎn)角和人臉坐標(biāo)包括：

將所述目標(biāo)圖像輸入到訓(xùn)練好的所述人臉定位網(wǎng)絡(luò)模型中，輸出人臉熱度圖、人臉尺度圖、人臉中心偏移量圖和人臉旋轉(zhuǎn)角圖；

根據(jù)所述人臉熱度圖、所述人臉尺度圖、所述人臉中心偏移量圖及人臉框規(guī)則得到所述目標(biāo)圖像中的人臉坐標(biāo)；

從所述人臉旋轉(zhuǎn)角圖中獲取人臉旋轉(zhuǎn)角。

3.如權(quán)利要求1或2所述的方法，其特征在于，所述人臉定位網(wǎng)絡(luò)模型的訓(xùn)練過程包括：

將人臉訓(xùn)練圖像進(jìn)行預(yù)處理；

根據(jù)預(yù)處理后的所述人臉訓(xùn)練圖像生成預(yù)測的人臉熱度圖、人臉尺度圖、人臉中心偏移量圖和人臉旋轉(zhuǎn)角圖；

分別計(jì)算所述人臉熱度圖、所述人臉尺度圖、所述人臉中心偏移量圖、所述人臉旋轉(zhuǎn)角圖的損失值，并按照預(yù)設(shè)的不同權(quán)重進(jìn)行串聯(lián)得到總損失值；

將所述總損失值進(jìn)行反傳，繼續(xù)獲取下一個(gè)人臉訓(xùn)練圖像進(jìn)行訓(xùn)練，直至所述人臉定位網(wǎng)絡(luò)模型的參數(shù)收斂。

4.如權(quán)利要求3所述的方法，其特征在于，所述人臉訓(xùn)練圖像中包括人工標(biāo)注的人臉旋轉(zhuǎn)角真實(shí)值，所述根據(jù)預(yù)處理后的所述人臉訓(xùn)練圖像生成預(yù)測的人臉旋轉(zhuǎn)角圖包括：

將所述人臉旋轉(zhuǎn)角圖的人臉中心點(diǎn)位置對應(yīng)的特征值標(biāo)注為所述真實(shí)值，將所述人臉旋轉(zhuǎn)角圖的其他像素點(diǎn)位置對應(yīng)的特征值標(biāo)注為0。

5.如權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述人臉熱度圖、所述人臉尺度圖、所述人臉中心偏移量圖及人臉框規(guī)則得到所述目標(biāo)圖像中的人臉坐標(biāo)包括：

將所述人臉熱度圖中特征值大于預(yù)設(shè)閾值的像素點(diǎn)確定為人臉區(qū)域；

在所述人臉中心偏移量圖上所述人臉區(qū)域?qū)?yīng)位置獲取人臉坐標(biāo)偏移量，與所述人臉熱度圖的坐標(biāo)相加，得到人臉中心點(diǎn)位置；

在所述人臉尺度圖上經(jīng)過指數(shù)換算計(jì)算出人臉的寬和高，從而得到人臉檢測框，再經(jīng)過非極大值抑制剔除重復(fù)的人臉檢測框，將所述人臉檢測框的位置坐標(biāo)確定為所述目標(biāo)圖像中的人臉坐標(biāo)。

6.如權(quán)利要求5所述的方法，其特征在于，所述根據(jù)所述人臉旋轉(zhuǎn)角和所述人臉坐標(biāo)構(gòu)建原始三角形和目標(biāo)三角形包括：

對所述人臉檢測框按預(yù)定比例向四周進(jìn)行外擴(kuò)，得到外擴(kuò)人臉框；

根據(jù)所述外擴(kuò)人臉框及其中心點(diǎn)的坐標(biāo)以及所述人臉旋轉(zhuǎn)角構(gòu)造三個(gè)旋轉(zhuǎn)點(diǎn)；

根據(jù)所述三個(gè)旋轉(zhuǎn)點(diǎn)構(gòu)建原始三角形；

根據(jù)所述外擴(kuò)人臉框的寬高構(gòu)建目標(biāo)三角形。

7.如權(quán)利要求1或6所述的方法，其特征在于，所述根據(jù)所述原始三角形和所述目標(biāo)三角形基于仿射變換實(shí)現(xiàn)從所述目標(biāo)圖像中的人臉摳圖，得到人臉圖像包括：

根據(jù)所述原始三角形和所述目標(biāo)三角形通過獲取仿射變換函數(shù)求得仿射變換矩陣；

根據(jù)所述仿射變換矩陣通過仿射變換函數(shù)從所述目標(biāo)圖像中進(jìn)行人臉摳圖，得到矯正后的人臉圖像。

8.一種人臉摳圖系統(tǒng)，其特征在于，所述系統(tǒng)包括：

檢測模塊，用于通過訓(xùn)練好的人臉定位網(wǎng)絡(luò)模型對目標(biāo)圖像進(jìn)行人臉檢測，得到人臉旋轉(zhuǎn)角和人臉坐標(biāo)；

構(gòu)建模塊，用于根據(jù)所述人臉旋轉(zhuǎn)角和所述人臉坐標(biāo)構(gòu)建原始三角形和目標(biāo)三角形；及

摳圖模塊，用于根據(jù)所述原始三角形和所述目標(biāo)三角形基于仿射變換實(shí)現(xiàn)從所述目標(biāo)圖像中的人臉摳圖，得到人臉圖像。

9.一種電子裝置，其特征在于，所述電子裝置包括存儲(chǔ)器、處理器，所述存儲(chǔ)器上存儲(chǔ)有可在所述處理器上運(yùn)行的人臉摳圖程序，所述人臉摳圖程序被所述處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-7中任一項(xiàng)所述的人臉摳圖方法的步驟。

10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)有人臉摳圖程序，所述人臉摳圖程序可被至少一個(gè)處理器執(zhí)行，以使所述至少一個(gè)處理器執(zhí)行如權(quán)利要求1-7中任一項(xiàng)所述的人臉摳圖方法的步驟。