[發明專利]圖像數據處理系統與方法

在審

• 申請號: 201880055814.1
• 申請日: 2018-08-03
• 公開（公告）號: CN111183455A
• 公開（公告）日: 2020-05-19
• 發明（設計）人: 徐意
• 申請（專利權）人: 互曼人工智能科技（上海）有限公司
• 主分類號: G06T7/162
• 分類號: G06T7/162
• 代理公司: 北京安信方達知識產權代理有限公司 11262
• 代理人: 周靖;陸建萍

1.一種從被攝體的圖像數據中識別人體特征的方法，所述方法包括：

從圖像數據中提取被攝體的圖像序列；

從每個圖像中估計對象的情感特征度量和面部中層特征度量；

對于每個圖像，結合相關的估計情緒度量和估計面部中層特征度量以形成特征向量，從而形成特征向量序列，每個特征向量與圖像序列的圖像相關聯；以及

將特征向量序列輸入到人類特征識別神經網絡，其中

所述人類特征識別神經網絡適于處理特征向量序列并生成與從特征向量序列導出的至少一個人類特征相對應的輸出數據。

2.根據任何先前權利要求所述的方法，其中所述圖像數據是視頻數據。

3.根據權利要求1或2所述的方法，其中所提取的圖像序列是被攝體的面部圖像。

4.根據權利要求3所述的一種方法，其中所述被攝體的面部為人臉。

5.根據權利要求4所述的方法，其中所述情緒度量通過訓練用于從人臉圖像中識別多個預定情緒的情緒識別神經網絡來估計。

6.根據權利要求5所述的一種方法，其中所述情緒度量與一種或多種憤怒、蔑視、厭惡、恐懼、快樂、悲傷和驚訝的人類情緒相關聯。

7.根據權利要求5或6所述的方法，包括通過情感識別神經網絡輸出n維向量，其中每個向量分量對應于預定情緒中的一種，向量的每個分量的大小對應于情緒識別神經網絡識別該情緒的置信度。

8.根據權利要求7所述的方法，包括生成對應于與情感相關聯的n維向量的進一步輸出數據。

9.根據任何先前權利要求所述的方法，其中基于圖像識別算法估計人臉的面部中層特征度量。

10.根據權利要求9所述的方法，其中面部中層特征度量是凝視、頭部位置和眼睛閉合的一個或多個。

11.根據任何先前權利要求所述的方法，其中，從分類為包含與多個預定人類特征中的一個或多個相關聯的人臉的視頻數據中訓練人類特征識別神經網絡。

12.根據任何先前權利要求所述的方法，其中人類特征識別神經網絡是遞歸神經網絡。

13.根據權利要求12所述的方法，其中所述人的特征識別神經網絡是一種長短期記憶網絡。

14.根據權利要求1至11中任一權利要求所述的方法，其中，人類特征識別神經網絡是卷積神經網絡。

15.根據權利要求14所述的方法，其中，人的特征識別神經網絡是基于波網絡的神經網絡。

16.根據任何先前權利要求所述的方法，其中所述人類特征識別神經網絡的輸出數據包括n維向量，其中所述向量的每個分量對應于人類特征，以及向量的每個分量的大小對應于被檢測特征的強度。

17.根據任何先前權利要求所述的方法，其中所述多個預定特征包括一個或多個特征，具體如激情、自信、誠實、緊張、好奇、判斷和分歧。