[發(fā)明專利]一種圖像處理方法、裝置以及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 201810887095.1
• 申請(qǐng)日: 2018-08-06
• 公開（公告）號(hào): CN110163806B
• 公開（公告）日: 2023-09-15
• 發(fā)明（設(shè)計(jì)）人: 吳江紅
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06T5/00
• 分類號(hào): G06T5/00;G06V40/16;G06V40/18
• 代理公司: 深圳翼盛智成知識(shí)產(chǎn)權(quán)事務(wù)所(普通合伙) 44300
• 代理人: 黃威

1.一種圖像處理方法，其特征在于，包括：

獲取待處理圖像，并對(duì)所述待處理圖像中的多個(gè)人臉進(jìn)行識(shí)別；

采用預(yù)設(shè)眼睛閉合檢測(cè)模型判斷每個(gè)人臉的眼部區(qū)域的特征點(diǎn)數(shù)量是否小于預(yù)設(shè)特征點(diǎn)數(shù)量；其中，所述眼睛閉合檢測(cè)模型是由多張標(biāo)注了眼睛閉合狀態(tài)的樣本人臉訓(xùn)練而成的；

將眼部區(qū)域的特征點(diǎn)數(shù)量小于預(yù)設(shè)特征點(diǎn)數(shù)量的人臉，作為眼部區(qū)域處于閉合狀態(tài)的待修正人臉；

根據(jù)所述待修正人臉的非眼部區(qū)域特征，在參考人臉數(shù)據(jù)庫(kù)中獲取與所述待修正人臉匹配的參考人臉，包括：獲取所述待修正人臉的非眼部區(qū)域的特征點(diǎn)集合以及參考人臉數(shù)據(jù)庫(kù)中的預(yù)設(shè)參考人臉的非眼部區(qū)域的特征點(diǎn)集合；計(jì)算各個(gè)預(yù)設(shè)參考人臉的非眼部區(qū)域的特征點(diǎn)集合與所述待修正人臉的非眼部區(qū)域的特征點(diǎn)集合的匹配度；將匹配度最高的預(yù)設(shè)參考人臉設(shè)置與所述待修正人臉匹配的參考人臉；

截取所述參考人臉的眼部區(qū)域，得到更新后的眼部區(qū)域；

合成所述更新后的眼部區(qū)域以及待處理圖像，得到目標(biāo)圖像，包括：檢測(cè)所述多個(gè)人臉在待處理圖像中的位置，得到在所述待處理圖像中位置存在偏移的偏移人臉；校正所述偏移人臉，得到校正后的人臉；確定當(dāng)前需要處理的待修正人臉的非眼部區(qū)域，得到當(dāng)前處理對(duì)象；獲取所述當(dāng)前處理對(duì)象在所述待處理圖像中對(duì)應(yīng)的待修正人臉的眼部區(qū)域，得到待替換對(duì)象；獲取所述當(dāng)前處理對(duì)象對(duì)應(yīng)的更新后的眼部區(qū)域，并將獲取到的更新后的眼部區(qū)域?qū)λ龃鎿Q對(duì)象進(jìn)行替換；返回執(zhí)行確定當(dāng)前需要處理的待修正人臉的非眼部區(qū)域的步驟，直至所有待修正人臉的眼部區(qū)域均替換完畢。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述檢測(cè)所述多個(gè)人臉在待處理圖像中的位置，得到在所述待處理圖像中的位置存在偏移的偏移人臉，包括：

提取所述多個(gè)人臉的臉部區(qū)域的特征點(diǎn)；

對(duì)所述多個(gè)人臉的臉部區(qū)域的特征點(diǎn)的偏移量進(jìn)行檢測(cè)，得到臉部區(qū)域在所述待處理圖像中的位置存在偏移的偏移人臉。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述得到校正后的人臉，包括：

根據(jù)所述偏移人臉構(gòu)建三維人臉模型，得到初始人臉模型；

根據(jù)所述初始人臉模型按照預(yù)設(shè)角度進(jìn)行旋轉(zhuǎn)，得到目標(biāo)人臉模型；

將所述目標(biāo)人臉模型映射為二維圖像，得到校正后的人臉。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

獲取基礎(chǔ)參考人臉候選庫(kù)和樣本圖像集，所述樣本圖像集包括多張包含人臉信息的樣本圖像；

根據(jù)所述樣本圖像集與所述基礎(chǔ)參考人臉候選庫(kù)構(gòu)建參考人臉數(shù)據(jù)庫(kù)。

5.根據(jù)權(quán)利要求1至4任一項(xiàng)所述的方法，其特征在于，所述采用預(yù)設(shè)眼睛閉合檢測(cè)模型對(duì)所述多個(gè)人臉的眼部區(qū)域的閉合狀態(tài)進(jìn)行檢測(cè)，得到眼部區(qū)域處于閉合狀態(tài)的待修正人臉的步驟之前，還包括：

采集多張樣本人臉，并對(duì)所述多張樣本人臉的眼睛閉合狀態(tài)進(jìn)行標(biāo)注；

將標(biāo)注后的多張樣本人臉添加至訓(xùn)練樣本集中；

根據(jù)訓(xùn)練樣本集對(duì)預(yù)設(shè)檢測(cè)模型進(jìn)行訓(xùn)練，得到眼睛閉合檢測(cè)模型。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述根據(jù)訓(xùn)練樣本集對(duì)預(yù)設(shè)檢測(cè)模型進(jìn)行訓(xùn)練，包括：

從所述訓(xùn)練樣本集中確定當(dāng)前訓(xùn)練樣本；

將所述當(dāng)前訓(xùn)練樣本導(dǎo)入預(yù)設(shè)檢測(cè)模型中，以得到當(dāng)前訓(xùn)練樣本的眼睛閉合狀態(tài)預(yù)測(cè)值；

獲取所述當(dāng)前訓(xùn)練樣本的眼睛閉合狀態(tài)標(biāo)注值；

對(duì)所述眼睛閉合狀態(tài)預(yù)測(cè)值和眼睛閉合狀態(tài)標(biāo)注值進(jìn)行收斂，并返回執(zhí)行從所述訓(xùn)練樣本集中確定當(dāng)前訓(xùn)練樣本的步驟，直到所述訓(xùn)練樣本集中的樣本人臉均訓(xùn)練完畢。