[發(fā)明專利]一種面部信息的獲取方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202010963606.0
• 申請(qǐng)日: 2020-09-14
• 公開（公告）號(hào): CN112101197A
• 公開（公告）日: 2020-12-18
• 發(fā)明（設(shè)計(jì)）人: 王森
• 申請(qǐng)（專利權(quán)）人: 北京金山云網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06F16/783
• 代理公司: 北京華夏泰和知識(shí)產(chǎn)權(quán)代理有限公司 11662
• 代理人: 曾軍;盧萬騰

1.一種面部信息的獲取方法，其特征在于，包括：

從目標(biāo)視頻的視頻幀集合中提取面部特征，得到所述視頻幀集合中每個(gè)視頻幀對(duì)應(yīng)的目標(biāo)面部特征；

根據(jù)所述視頻幀集合和所述每個(gè)視頻幀對(duì)應(yīng)的目標(biāo)面部特征，對(duì)所述目標(biāo)視頻中所包括的面部進(jìn)行聚類，得到目標(biāo)面部類別和所述目標(biāo)面部類別對(duì)應(yīng)的類別面部特征；

在面部信息庫中識(shí)別所述類別面部特征對(duì)應(yīng)的目標(biāo)面部信息，其中，所述面部信息庫中記錄了具有對(duì)應(yīng)關(guān)系的面部特征和面部信息；

輸出所述目標(biāo)面部類別對(duì)應(yīng)的目標(biāo)面部信息。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述視頻幀集合和所述每個(gè)視頻幀對(duì)應(yīng)的目標(biāo)面部特征，對(duì)所述目標(biāo)視頻中所包括的面部進(jìn)行聚類，得到所述目標(biāo)面部類別和所述目標(biāo)面部類別對(duì)應(yīng)的類別面部特征包括：

將所述視頻幀集合劃分為多個(gè)場(chǎng)景，其中，所述多個(gè)場(chǎng)景中每個(gè)場(chǎng)景包括所述視頻幀集合中的一個(gè)視頻幀或者多個(gè)連續(xù)的視頻幀；

對(duì)所述每個(gè)場(chǎng)景中包括的目標(biāo)面部特征進(jìn)行聚類，得到所述每個(gè)場(chǎng)景對(duì)應(yīng)的場(chǎng)景面部類別和每個(gè)場(chǎng)景面部類別對(duì)應(yīng)的場(chǎng)景面部特征；

對(duì)所述目標(biāo)視頻中包括的場(chǎng)景面部特征進(jìn)行聚類，得到所述目標(biāo)面部類別和每個(gè)目標(biāo)面部類別對(duì)應(yīng)的類別面部特征。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，將所述視頻幀集合劃分為多個(gè)場(chǎng)景包括：

確定所述視頻幀集合中連續(xù)的兩個(gè)視頻幀之間的第一相似度；

將所述第一相似度高于或者等于第一相似度閾值的兩個(gè)視頻幀劃分為同一場(chǎng)景，將所述第一相似度低于第一相似度閾值的兩個(gè)視頻幀劃分為不同場(chǎng)景，得到所述多個(gè)場(chǎng)景。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，對(duì)所述每個(gè)場(chǎng)景中包括的目標(biāo)面部特征進(jìn)行聚類，得到所述每個(gè)場(chǎng)景對(duì)應(yīng)的場(chǎng)景面部類別和每個(gè)場(chǎng)景面部類別對(duì)應(yīng)的場(chǎng)景面部特征包括：

根據(jù)所述每個(gè)場(chǎng)景包括的目標(biāo)面部特征之間的第二相似度，對(duì)所述每個(gè)場(chǎng)景中所包括的目標(biāo)面部特征進(jìn)行分類，得到所述每個(gè)場(chǎng)景中的場(chǎng)景面部類別，其中，每個(gè)場(chǎng)景面部類別中包括的目標(biāo)面部特征之間的所述第二相似度高于第二相似度閾值；

對(duì)每個(gè)場(chǎng)景面部類別中包括的目標(biāo)面部特征進(jìn)行融合，得到所述每個(gè)場(chǎng)景面部類別對(duì)應(yīng)的場(chǎng)景面部特征。

5.根據(jù)權(quán)利要求2所述的方法，其特征在于，對(duì)所述目標(biāo)視頻中包括的場(chǎng)景面部特征進(jìn)行聚類，得到所述目標(biāo)面部類別和每個(gè)目標(biāo)面部類別對(duì)應(yīng)的類別面部特征包括：

根據(jù)所述每個(gè)場(chǎng)景面部類別包括的場(chǎng)景面部特征之間的第三相似度，對(duì)所述目標(biāo)視頻中所包括的場(chǎng)景面部特征進(jìn)行分類，得到所述目標(biāo)面部類別，其中，每個(gè)目標(biāo)面部類別中包括的場(chǎng)景面部特征之間的所述第三相似度高于第三相似度閾值；

對(duì)每個(gè)目標(biāo)面部類別中包括的場(chǎng)景面部特征進(jìn)行融合，得到所述每個(gè)目標(biāo)面部類別對(duì)應(yīng)的類別面部特征。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，輸出所述目標(biāo)面部類別對(duì)應(yīng)的目標(biāo)面部信息包括：

確定所述每個(gè)目標(biāo)面部類別中包括的類別面部特征對(duì)應(yīng)的視頻幀在所述目標(biāo)視頻中的時(shí)間信息；

輸出具有對(duì)應(yīng)關(guān)系的目標(biāo)面部類別、目標(biāo)面部信息和時(shí)間信息。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，從目標(biāo)視頻的視頻幀集合中提取面部特征，得到所述視頻幀集合中每個(gè)視頻幀對(duì)應(yīng)的目標(biāo)面部特征包括：

按照目標(biāo)時(shí)間間隔從所述目標(biāo)視頻中抽取視頻幀，得到所述視頻幀集合；

對(duì)所述視頻幀集合中每個(gè)視頻幀進(jìn)行面部識(shí)別，得到每個(gè)視頻幀中包括的面部；

對(duì)每個(gè)視頻幀中包括的面部進(jìn)行面部特征提取，得到所述視頻幀集合中每個(gè)視頻幀對(duì)應(yīng)的目標(biāo)面部特征。