[發(fā)明專利]一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202210138614.0
• 申請日: 2022-02-15
• 公開（公告）號(hào): CN116645707A
• 公開（公告）日: 2023-08-25
• 發(fā)明（設(shè)計(jì)）人: 段興;汪博;朱力;呂方璐
• 申請（專利權(quán)）人: 深圳市光鑒科技有限公司
• 主分類號(hào): G06V40/16
• 分類號(hào): G06V40/16;G06V10/774;G06V10/82;G06N3/04;G06N3/08
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，包括：

第一標(biāo)注模塊11，用于在人臉圖像數(shù)據(jù)集中選取的小樣本數(shù)據(jù)標(biāo)注五個(gè)關(guān)鍵點(diǎn)；其中，所述五個(gè)關(guān)鍵點(diǎn)包括左右兩個(gè)嘴角，兩個(gè)眼的中心和鼻子；所述人臉圖像數(shù)據(jù)集中包括正臉照和側(cè)臉照，且圖像為深度圖像；

第一模型模塊12，用于多任務(wù)模型的推理，對不同尺寸的所述小樣本數(shù)據(jù)進(jìn)行像素級(jí)定位和標(biāo)注，并形成第一標(biāo)注模型；其中，所述多任務(wù)學(xué)習(xí)中包含人臉框位置檢測功能，人臉框置信度分類功能，人臉關(guān)鍵點(diǎn)回歸功能，其中人臉關(guān)鍵點(diǎn)還可以進(jìn)一步的用于人臉角度的計(jì)算；

調(diào)整模塊13，用于檢查所述小樣本數(shù)據(jù)的標(biāo)注效果，調(diào)整上一步中的參數(shù)，直至標(biāo)注效果達(dá)到預(yù)期；

第二模型模塊14，用于利用所述人臉圖像數(shù)據(jù)集中選取的大樣本數(shù)據(jù)對所述第一標(biāo)注模型進(jìn)行訓(xùn)練得到第二標(biāo)注模型。

2.根據(jù)權(quán)利要求1所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，還包括：

預(yù)標(biāo)注模塊15，用于用所述第二標(biāo)注模型對所述人臉圖像數(shù)據(jù)集進(jìn)行預(yù)標(biāo)注；

補(bǔ)充標(biāo)注模塊16，用于對所述預(yù)標(biāo)注進(jìn)行補(bǔ)充標(biāo)注，以提升標(biāo)注效果。

3.根據(jù)權(quán)利要求1所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，對于所述側(cè)臉照，增加輔助關(guān)鍵點(diǎn)：耳朵。

4.根據(jù)權(quán)利要求1所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，所述在人臉圖像數(shù)據(jù)集中選取的小樣本數(shù)據(jù)標(biāo)注五個(gè)關(guān)鍵點(diǎn)時(shí)，采用手動(dòng)選取的方式。

5.根據(jù)權(quán)利要求1所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，所述在人臉圖像數(shù)據(jù)集中選取的小樣本數(shù)據(jù)標(biāo)注五個(gè)關(guān)鍵點(diǎn)時(shí)，采用先自動(dòng)選取，后手動(dòng)調(diào)整的方式。

6.根據(jù)權(quán)利要求1所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，分別存儲(chǔ)有與所述RGBD圖像對應(yīng)的RGB圖像和深度數(shù)據(jù)。

7.根據(jù)權(quán)利要求1所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，所述第一標(biāo)注模型和所述第二標(biāo)注模型是根據(jù)深度圖像學(xué)習(xí)獲得。

8.根據(jù)權(quán)利要求6所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，所述第一標(biāo)注模型和所述第二標(biāo)注模型是分別根據(jù)所述RGB圖像和所述深度數(shù)據(jù)學(xué)習(xí)獲得，再根據(jù)所述RGB圖像和所述深度數(shù)據(jù)的對應(yīng)關(guān)系，融合獲得最終的所述第一標(biāo)注模型和所述第二標(biāo)注模型。

9.根據(jù)權(quán)利要求1所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)，其特征在于，所述第一標(biāo)注模型和所述第二標(biāo)注模型還識(shí)別人臉輪廓線，用于人臉角度計(jì)算。

10.一種電子設(shè)備，其特征在于，包括權(quán)利要求1至9中任一項(xiàng)所述的一種人臉關(guān)鍵點(diǎn)標(biāo)注系統(tǒng)。