[發(fā)明專利]一種人臉表情分析方法和系統(tǒng)及滿意度分析方法和系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202010033040.1
• 申請日: 2020-01-13
• 公開（公告）號: CN113111690A
• 公開（公告）日: 2021-07-13
• 發(fā)明（設(shè)計）人: 郭明坤
• 申請（專利權(quán)）人: 北京靈汐科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京君泊知識產(chǎn)權(quán)代理有限公司 11496
• 代理人: 王程遠

1.一種人臉表情分析方法，其特征在于，包括：

S1，獲取待分析的人臉表情視頻片段，并獲取視頻片段中的圖片流；

S2，分析圖片流中每幀畫面的人臉表情指數(shù)，確定圖片流所對應(yīng)的人臉表情頻譜圖；

S3，根據(jù)所述人臉表情頻譜圖，確定人臉在自然狀態(tài)下所對應(yīng)的基準線，并基于所述基準線確定人臉在自然狀態(tài)下的自然情緒區(qū)域；

S4，以所述自然情緒區(qū)域為基準，將人臉表情頻譜圖劃分為對應(yīng)不同表情的多個情緒區(qū)域。

2.如權(quán)利要求1所述的一種人臉表情分析方法，其特征在于，S1中，通過逐幀或固定間隔抽幀或抽取關(guān)鍵幀的方式獲取視頻片段中的圖片流。

3.如權(quán)利要求2所述的一種人臉表情分析方法，其特征在于，獲取人臉表情視頻片段中的圖片流時，包括：將視頻片段進行分割，得到多個視頻子片段，隨機或固定抽取各視頻子片段中的至少一幀；

根據(jù)抽取的多個畫面幀，確定視頻片段中的圖片流。

4.如權(quán)利要求1所述的一種人臉表情分析方法，其特征在于，所述方法還包括：對所述圖片流中的各幀畫面進行人臉檢測，獲取各幀畫面中的人臉圖像。

5.如權(quán)利要求4所述的一種人臉表情分析方法，其特征在于，S2包括：

S21，將人臉圖像劃分為多個區(qū)域，每個區(qū)域內(nèi)包含用于確定人臉表情指數(shù)的多個關(guān)鍵特征點；

S22，針對每幀畫面分別確定各區(qū)域包含的關(guān)鍵特征點，確定各區(qū)域?qū)?yīng)的表情分值，并根據(jù)各區(qū)域?qū)?yīng)的表情分值，確定每幀畫面的人臉表情指數(shù)；

S23，根據(jù)所有畫面的人臉表情指數(shù)獲取圖片流所對應(yīng)的人臉表情頻譜圖。

6.如權(quán)利要求5所述的一種人臉表情分析方法，其特征在于，S21包括：

對所述人臉圖像進行人臉特征點識別，得到所述人臉圖像的多個特征點；

從所述多個特征點中識別出用于確定人臉表情指數(shù)的多個關(guān)鍵特征點；

根據(jù)所述多個關(guān)鍵特征點，將人臉劃分為多個區(qū)域，每個區(qū)域內(nèi)包含用于確定人臉表情指數(shù)的多個關(guān)鍵特征點。

7.如權(quán)利要求5所述的一種人臉表情分析方法，其特征在于，S22包括：

確定各區(qū)域中關(guān)鍵特征點連線之間的至少一個夾角，并根據(jù)所述至少一個夾角，確定各區(qū)域?qū)?yīng)的表情分值；

確定各區(qū)域?qū)?yīng)的權(quán)重；

根據(jù)各區(qū)域?qū)?yīng)的表情分值以及各區(qū)域?qū)?yīng)的權(quán)重，確定每幀畫面的人臉表情指數(shù)。

8.如權(quán)利要求1所述的一種人臉表情分析方法，其特征在于，S3包括：

S31，在人臉表情頻譜圖中，確定人臉表情指數(shù)出現(xiàn)頻次最高的第一區(qū)間；

S32，根據(jù)所述第一區(qū)間，確定人臉在自然狀態(tài)下所對應(yīng)的基準線；

S33，以所述基準線為中心，將基準線上下一定寬度范圍內(nèi)的第二區(qū)間作為人臉在自然狀態(tài)下的自然情緒區(qū)域。

9.如權(quán)利要求8所述的一種人臉表情分析方法，其特征在于，S32包括：

確定所述第一區(qū)間的水平中心線；

若所述水平中心線對應(yīng)的人臉表情指數(shù)大于第一閾值，且小于第二閾值，則將所述水平中心線確定為人臉在自然狀態(tài)下所對應(yīng)的基準線；

若所述水平中心線對應(yīng)的人臉表情指數(shù)小于或等于第一閾值，則將所述第一閾值對應(yīng)的水平線確定為人臉在自然狀態(tài)下所對應(yīng)的基準線；

若所述水平中心線對應(yīng)的人臉表情指數(shù)大于或等于第二閾值，則將所述第二閾值對應(yīng)的水平線確定為人臉在自然狀態(tài)下所對應(yīng)的基準線。

10.如權(quán)利要求1所述的一種人臉表情分析方法，其特征在于，S4中，在人臉表情頻譜圖中，將所述自然情緒區(qū)域以上的區(qū)域確定為積極情緒區(qū)域，所述自然情緒區(qū)域以下的區(qū)域確定為消極情緒區(qū)域。