[發(fā)明專利]人臉關(guān)鍵點(diǎn)修正方法、裝置以及計(jì)算機(jī)設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 202010138384.9
• 申請(qǐng)日: 2020-03-03
• 公開（公告）號(hào): CN111444775B
• 公開（公告）日: 2023-10-27
• 發(fā)明（設(shè)計(jì)）人: 蔡中印;陸進(jìn);陳斌;宋晨
• 申請(qǐng)（專利權(quán)）人: 平安科技（深圳）有限公司
• 主分類號(hào): G06V40/16
• 分類號(hào): G06V40/16;G06V10/774;G06V10/82;G06N3/0464
• 代理公司: 北京英特普羅知識(shí)產(chǎn)權(quán)代理有限公司 11015
• 代理人: 鄧小玲;王勇

本發(fā)明公開了一種人臉關(guān)鍵點(diǎn)修正方法，該方法包括：接收第一點(diǎn)位標(biāo)準(zhǔn)的第一樣本圖像；通過初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型對(duì)所述第一樣本圖像進(jìn)行關(guān)鍵點(diǎn)預(yù)測，得到第二點(diǎn)位標(biāo)準(zhǔn)的第二樣本圖像；獲取所述第一樣本圖像的第一基礎(chǔ)關(guān)鍵點(diǎn)和所述第二樣本圖像中的第二基礎(chǔ)關(guān)鍵點(diǎn)，計(jì)算位置偏移函數(shù)；根據(jù)所述位置偏移函數(shù)對(duì)所述第二樣本圖像中的所有關(guān)鍵點(diǎn)進(jìn)行修正，得到第三樣本圖像。本發(fā)明還提供一種人臉關(guān)鍵點(diǎn)修正裝置、計(jì)算機(jī)設(shè)備以及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，本發(fā)明能夠根據(jù)第一點(diǎn)位標(biāo)準(zhǔn)的人臉關(guān)鍵點(diǎn)圖像對(duì)初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型預(yù)測的第二人臉關(guān)鍵點(diǎn)圖像的關(guān)鍵點(diǎn)坐標(biāo)進(jìn)行修正，從而提高第二人臉關(guān)鍵點(diǎn)圖像的精確性。

技術(shù)領(lǐng)域

本發(fā)明涉及人臉識(shí)別技術(shù)領(lǐng)域，尤其涉及一種人臉關(guān)鍵點(diǎn)修正方法、裝置、計(jì)算機(jī)設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

目前人臉識(shí)別技術(shù)中，一般過程包括：先基于一個(gè)點(diǎn)位標(biāo)準(zhǔn)去標(biāo)注出圖像中的人臉關(guān)鍵點(diǎn)圖像，然后通過人臉識(shí)別模型對(duì)標(biāo)注出的人臉關(guān)鍵點(diǎn)圖像進(jìn)行訓(xùn)練或者識(shí)別。其中，人臉關(guān)鍵點(diǎn)圖像大多是采用人臉關(guān)鍵點(diǎn)識(shí)別模型進(jìn)行標(biāo)注，比如一個(gè)深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)網(wǎng)絡(luò)。現(xiàn)有技術(shù)中存在有不同點(diǎn)位標(biāo)準(zhǔn)的人臉關(guān)鍵點(diǎn)識(shí)別模型，而且第一點(diǎn)位標(biāo)準(zhǔn)的人臉關(guān)鍵點(diǎn)圖像并不能直接用于第二點(diǎn)位標(biāo)準(zhǔn)的人臉識(shí)別模型進(jìn)行訓(xùn)練。因此，需要通過第二點(diǎn)位標(biāo)準(zhǔn)對(duì)應(yīng)的第二人臉關(guān)鍵點(diǎn)識(shí)別模型對(duì)所述第一點(diǎn)位標(biāo)準(zhǔn)的人臉關(guān)鍵點(diǎn)圖像重新進(jìn)行關(guān)鍵點(diǎn)標(biāo)注，得到第二點(diǎn)位標(biāo)準(zhǔn)的人臉關(guān)鍵點(diǎn)圖像才能用于所述第二人臉識(shí)別模型進(jìn)行訓(xùn)練或者識(shí)別。

實(shí)際應(yīng)用中，由于采樣數(shù)據(jù)的缺乏，通常會(huì)使用第一點(diǎn)位標(biāo)準(zhǔn)的人臉關(guān)鍵點(diǎn)圖像去訓(xùn)練第二人臉識(shí)別模型。而初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型本身不完善，直接使用來標(biāo)注人臉圖像的人臉關(guān)鍵點(diǎn)圖像，容易導(dǎo)致精確性并不是很高，導(dǎo)致最終訓(xùn)練所述第二人臉識(shí)別模型的效果很差。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明提出一種人臉關(guān)鍵點(diǎn)修正方法、裝置、計(jì)算機(jī)設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，能夠解決上述直接采用初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型預(yù)測出來的第二人臉關(guān)鍵點(diǎn)圖像的精確性不高的問題。

首先，為實(shí)現(xiàn)上述目的，本發(fā)明提供一種人臉關(guān)鍵點(diǎn)修正方法，所述方法包括：

接收第一點(diǎn)位標(biāo)準(zhǔn)的第一樣本圖像；通過初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型對(duì)所述第一樣本圖像進(jìn)行關(guān)鍵點(diǎn)預(yù)測，得到第二點(diǎn)位標(biāo)準(zhǔn)的第二樣本圖像；獲取所述第一樣本圖像的第一基礎(chǔ)關(guān)鍵點(diǎn)和所述第二樣本圖像中的第二基礎(chǔ)關(guān)鍵點(diǎn)；根據(jù)所述第一基礎(chǔ)關(guān)鍵點(diǎn)和所述第二基礎(chǔ)關(guān)鍵點(diǎn)計(jì)算位置偏移函數(shù)；根據(jù)所述位置偏移函數(shù)對(duì)所述第二樣本圖像中的所有關(guān)鍵點(diǎn)進(jìn)行修正，得到第三樣本圖像。

優(yōu)選地，所述通過初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型對(duì)所述第一樣本圖像進(jìn)行關(guān)鍵點(diǎn)預(yù)測之前，還包括：通過人臉框識(shí)別模型對(duì)所述第一樣本圖像進(jìn)行人臉框識(shí)別，并標(biāo)注出人臉框。

優(yōu)選地，所述位置偏移函數(shù)包括一個(gè)仿射矩陣，所述仿射矩陣的計(jì)算表達(dá)式包括：M＝cv2.getAffineTransform(pts1,pts2)，其中，M為仿射矩陣，cv2為python庫，pts1為第一基礎(chǔ)關(guān)鍵點(diǎn)的坐標(biāo)，pts2為第二基礎(chǔ)關(guān)鍵點(diǎn)的坐標(biāo)。

優(yōu)選地，所述方法還包括：將所述第三樣本圖像輸入到所述初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型進(jìn)行訓(xùn)練，從而得到第二人臉關(guān)鍵點(diǎn)識(shí)別模型。

優(yōu)選地，所述初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型對(duì)應(yīng)的神經(jīng)網(wǎng)絡(luò)模型中采用的卷積層連接多組全連接層的結(jié)構(gòu)。

此外，為實(shí)現(xiàn)上述目的，本發(fā)明還提供一種人臉關(guān)鍵點(diǎn)修正裝置，所述裝置包括：

接收模塊，用于接收第一點(diǎn)位標(biāo)準(zhǔn)的第一樣本圖像；預(yù)測模塊，用于通過初始第二人臉關(guān)鍵點(diǎn)識(shí)別模型對(duì)所述第一樣本圖像進(jìn)行關(guān)鍵點(diǎn)預(yù)測，得到第二點(diǎn)位標(biāo)準(zhǔn)的第二樣本圖像；獲取模塊，用于獲取所述第一樣本圖像的第一基礎(chǔ)關(guān)鍵點(diǎn)和所述第二樣本圖像中的第二基礎(chǔ)關(guān)鍵點(diǎn)；計(jì)算模塊，用于根據(jù)所述第一基礎(chǔ)關(guān)鍵點(diǎn)和所述第二基礎(chǔ)關(guān)鍵點(diǎn)計(jì)算位置偏移函數(shù)；修正模塊，用于根據(jù)所述位置偏移函數(shù)對(duì)所述第二樣本圖像中的所有關(guān)鍵點(diǎn)進(jìn)行修正，得到第三樣本圖像。