[發明專利]用戶情緒識別方法、裝置以及計算機可讀存儲介質

在審

• 申請號: 201910679946.8
• 申請日: 2019-07-25
• 公開（公告）號: CN110399837A
• 公開（公告）日: 2019-11-01
• 發明（設計）人: 阿德旺;金大鵬;殷燕
• 申請（專利權）人: 深圳智慧林網絡科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06F16/53;G10L25/63
• 代理公司: 深圳市港灣知識產權代理有限公司 44258
• 代理人: 微嘉

1.一種用戶情緒識別方法，其特征在于，包括以下步驟：

獲取用戶的人臉圖像和語音信息；

根據所述人臉圖像預設關鍵點的位置信息確定所述用戶的第一情緒狀態；

根據所述語音信息確定所述用戶的第二情緒狀態；

根據所述第一情緒狀態和所述第二情緒狀態確定所述用戶最終的情緒狀態。

2.根據權利要求1所述的用戶情緒識別方法，其特征在于，所述根據所述第一情緒狀態和所述第二情緒狀態確定所述用戶最終的情緒狀態的步驟包括：

判斷所述第一情緒狀態與所述第二情緒狀態是否相同；

當所述第一情緒狀態與所述第二情緒狀態相同時，則將所述第一情緒狀態或所述第二情緒狀態作為所述用戶最終的情緒狀態。

3.根據權利要求2所述的用戶情緒識別方法，其特征在于，所述根據所述第一情緒狀態和所述第二情緒狀態確定所述用戶最終的情緒狀態的步驟包括：

當所述第一情緒狀態與所述第二情緒狀態不相同時，判斷所述第一情緒狀態和所述第二情緒狀態是否包含有消極情緒狀態；

若是，則將包含有消極情緒狀態的情緒狀態作為所述用戶最終的情緒狀態；

若否，則根據所述第一情緒狀態的第一權值以及所述第二情緒狀態的第二權值計算得到所述用戶最終的情緒狀態。

4.根據權利要求1所述的用戶情緒識別方法，其特征在于，根據所述人臉圖像預設關鍵點的位置信息確定所述所述用戶的第一情緒狀態的步驟包括：

根據所述人臉圖像建立人臉三維坐標模型；

根據所述人臉三維坐標模型確定所述預設關鍵點對應的坐標值，并根據所述坐標值計算每兩個所述關鍵點之間的距離信息；

將所述距離信息與對應預設的距離信息進行比較，根據比較結果確定所述用戶的第一情緒狀態。

5.根據權利要求1所述的用戶情緒識別方法，其特征在于，根據所述人臉圖像預設關鍵點的位置信息確定所述用戶的第一情緒狀態的步驟包括：

根據預先劃分的人臉圖像區域獲取每個區域對應的預設關鍵點的位置信息；

根據獲取的位置信息計算每個區域對應的局部情緒狀態；

根據各個局部情緒狀態確定所述用戶的第一情緒狀態。

6.根據權利要求1所述的用戶情緒識別方法，其特征在于，所述根據所述語音信息確定所述用戶的第二情緒狀態的步驟包括：

對所述語音信息進行分析得到文本特征和語調特征；

將所述文本特征與文本數據庫預存的信息進行匹配，得到第一匹配結果；

將所述語調特征與語調數據庫預存的信息進行匹配，得到第二匹配結果；

結合所述第一匹配結果和所述第二匹配結果，得到所述用戶的第二情緒狀態。

7.如權利要求6所述用戶情緒識別方法，其特征在于，所述將所述語調特征與語調數據庫預存的信息進行匹配，得到第二匹配結果的步驟包括：

判斷所述第一匹配結果與所述文本數據庫預存的信息是否匹配；

若是，則根據所述第一匹配結果調出第一語調數據庫，將所述第一語調數據庫作為語調數據庫；

若否，則調出第二語調數據庫，將所述第二語調數據庫作為語調數據庫；

根據所述語調特征和所述語調數據庫，得到所述第二匹配結果。

8.如權利要求7所述用戶情緒識別方法，其特征在于，所述根據所述語調特征和所述語調數據庫，得到所述第二匹配結果的步驟包括：

根據所述語調數據庫調出語音情緒狀態判斷模型；

將所述第二匹配結果與所述語音情緒狀態判斷模型進行比對，得到所述用戶的第二情緒狀態。

9.一種用戶情緒識別裝置，其特征在于，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的用戶情緒識別程序，所述處理器執行所述用戶情緒識別程序時實現權利要求1-8任一所述的用戶情緒識別方法的步驟。

10.一種計算機可讀存儲介質，其特征在于，所述計算機可讀存儲介質上存儲有用戶情緒識別程序，所述用戶情緒識別程序被處理器執行如權利要求1至8中任一項所述的用戶情緒識別方法的步驟。