[發(fā)明專利]人臉融合識(shí)別方法及裝置、電子設(shè)備和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 201711289347.2
• 申請(qǐng)日: 2017-12-07
• 公開(kāi)（公告）號(hào): CN108229330A
• 公開(kāi)（公告）日: 2018-06-29
• 發(fā)明（設(shè)計(jì)）人: 黃瀟瑩;張丹丹;張廣程
• 申請(qǐng)（專利權(quán)）人: 深圳市商湯科技有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00
• 代理公司: 北京思源智匯知識(shí)產(chǎn)權(quán)代理有限公司 11657
• 代理人: 毛麗琴

1.一種人臉融合識(shí)別方法，其特征在于，所述方法包括：

從視頻幀序列中獲取同一個(gè)用戶的多張人臉圖像；

對(duì)所述多張人臉圖像的每張人臉圖像進(jìn)行特征提取，得到多張人臉圖像對(duì)應(yīng)的多個(gè)人臉特征；

將所述多個(gè)人臉特征進(jìn)行融合處理，得到融合人臉特征；

基于所述融合人臉特征，對(duì)所述用戶進(jìn)行人臉識(shí)別。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，在所述獲取同一個(gè)用戶的多張人臉圖像之后，還包括：

獲取所述多張人臉圖像的質(zhì)量，過(guò)濾掉人臉圖像質(zhì)量分值低于預(yù)置的圖像質(zhì)量最低閾值的人臉圖像，得到過(guò)濾后人臉圖像集；

所述對(duì)所述多張人臉圖像的每張人臉圖像進(jìn)行特征提取，得到多張人臉圖像對(duì)應(yīng)的多個(gè)人臉特征；將所述多個(gè)人臉特征進(jìn)行融合處理，得到融合人臉特征，包括：

對(duì)所述過(guò)濾后人臉圖像集中的每張人臉圖像進(jìn)行特征提取，得到分別對(duì)應(yīng)的多個(gè)人臉特征；將所述多個(gè)人臉特征進(jìn)行融合處理，得到所述融合人臉特征。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對(duì)所述多張人臉圖像進(jìn)行質(zhì)量判斷，過(guò)濾掉質(zhì)量低的人臉圖像，包括：

檢測(cè)各張人臉圖像中人臉大小、人臉姿態(tài)角度、人臉面部信息完整度、圖片模糊程度、圖片亮度、圖片對(duì)比度，圖片背景環(huán)境，和/或，是否為彩色圖像；

根據(jù)檢測(cè)結(jié)果，計(jì)算各張人臉圖像的質(zhì)量分值；

將所述各張人臉圖像的質(zhì)量分值與預(yù)置的圖像質(zhì)量最低閾值進(jìn)行比較；

過(guò)濾掉質(zhì)量分值低于所述最低閾值的人臉圖像。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述多個(gè)人臉特征進(jìn)行融合處理，包括：

將多個(gè)人臉特征進(jìn)行量化為多個(gè)人臉特征向量；將這多個(gè)人臉特征向量進(jìn)行融合計(jì)算，得到融合人臉特征。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述將這多個(gè)人臉特征向量進(jìn)行融合計(jì)算，得到融合人臉特征，包括：

基于各個(gè)人臉特征向量各分量的平均值或加權(quán)平均值，得到表征融合人臉特征的融合人臉特征向量；或，

基于各個(gè)人臉特征向量各分量的最大值或最小值，得到表征融合人臉特征的融合人臉特征向量；或，

基于深度學(xué)習(xí)算法對(duì)所述多個(gè)人臉特征向量進(jìn)行計(jì)算，得到表征融合人臉特征的融合人臉特征向量；或，

將各個(gè)人臉特征向量各分量進(jìn)行拼接，得到表征融合人臉特征的融合人臉特征向量。

6.根據(jù)權(quán)利要去1所述的方法，其特征在于，所述基于所述融合人臉特征，對(duì)所述用戶進(jìn)行人臉識(shí)別，包括：

對(duì)所述融合人臉特征與人像數(shù)據(jù)庫(kù)中各預(yù)存人像的人臉特征之間進(jìn)行相似度檢測(cè)，得到與所述融合人臉特征之間的相似度高于相似度閾值的預(yù)存人像作為目標(biāo)預(yù)存人像；其中，所述人像數(shù)據(jù)庫(kù)中包括至少一個(gè)所述預(yù)存人像；

將至少一個(gè)所述目標(biāo)預(yù)存人像作為所述用戶的人臉識(shí)別結(jié)果。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述人臉識(shí)別結(jié)果包括：所述相似度值、所述目標(biāo)預(yù)存人像、所述目標(biāo)預(yù)存人像所屬的人像數(shù)據(jù)庫(kù)、所述目標(biāo)預(yù)存人像對(duì)應(yīng)的用戶屬性信息中的任意一項(xiàng)或任意組合。

8.一種人臉融合識(shí)別裝置，其特征在于，所述裝置包括：

圖像獲取單元，用于從視頻幀序列中獲取同一個(gè)用戶的多張人臉圖像；

特征提取單元，用于對(duì)所述多張人臉圖像的每張人臉圖像進(jìn)行特征提取，得到多張人臉圖像對(duì)應(yīng)的多個(gè)人臉特征；

特征融合單元，用于將所述多個(gè)人臉特征進(jìn)行融合處理，得到融合人臉特征；

人臉識(shí)別單元，用于基于所述融合人臉特征，對(duì)所述用戶進(jìn)行人臉識(shí)別。

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，其特征在于，該程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-7任一項(xiàng)所述方法的步驟。

10.一種電子設(shè)備，包括存儲(chǔ)器、處理器及存儲(chǔ)在存儲(chǔ)器上并可在處理器上運(yùn)行的計(jì)算機(jī)程序，其特征在于，所述處理器執(zhí)行所述程序時(shí)實(shí)現(xiàn)權(quán)利要求1-7任一項(xiàng)所述方法的步驟。