[發明專利]面審視頻數據處理方法、裝置、計算機設備和存儲介質在審
| 申請號: | 201910522249.1 | 申請日: | 2019-06-17 |
| 公開(公告)號: | CN110378228A | 公開(公告)日: | 2019-10-25 |
| 發明(設計)人: | 王麗杰 | 申請(專利權)人: | 深圳壹賬通智能科技有限公司 |
| 主分類號: | G06K9/00 | 分類號: | G06K9/00;G10L25/63 |
| 代理公司: | 廣州華進聯合專利商標代理有限公司 44224 | 代理人: | 王珊珊 |
| 地址: | 518052 廣東省深圳市*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 目標用戶 表情識別 計算機設備 視頻流數據 音頻流數據 存儲介質 情緒變化 狀況信息 數據處理 膚色 文本 人工智能技術 變化分析 波動數據 獲取目標 面部膚色 面部圖像 評估分析 評估結果 聲紋識別 語音識別 聲紋 維度 視頻 申請 分析 | ||
本申請涉及人工智能技術領域,提供了一種面審視頻數據處理方法、裝置、計算機設備和存儲介質。方法包括:獲取目標用戶的面審視頻,并提取出音頻流數據和視頻流數據,對音頻流數據進行聲紋識別處理,得到聲紋波動數據,進而確定目標用戶的情緒變化數據,獲取視頻流數據中的目標用戶面部圖像進行面部膚色變化分析,得到目標用戶的膚色狀況信息,通過語音識別和微表情識別處理,得到面審問答文本和微表情識別結果,根據情緒變化數據、膚色狀況信息、面審問答文本和微表情識別結果,對目標用戶進行各維度數據的綜合面審評估分析,分析更為全面,從而得到更為準確的面審評估結果。
技術領域
本申請涉及人工智能技術領域,特別是涉及一種面審視頻數據處理方法、裝置、計算機設備和存儲介質。
背景技術
現有的面審技術,一般是通過對用戶進行問答,通過采集用戶問答過程中的面部圖像或視頻數據,通過面部識別技術進行用戶微表情識別,用以確定用戶的申請信息是否為本人,以及是否存在欺詐的可能性。
但對于通過包裝、刻意偽裝的用戶,現有的面審技術對欺詐可能性識別的準確度不高,面審評估結果不夠準確。
發明內容
基于此,有必要針對上述技術問題,提供一種能夠提高面審評估結果準確性的面審視頻數據處理方法、裝置、計算機設備和存儲介質。
一種面審視頻數據處理方法,所述方法包括:
獲取目標用戶的面審視頻,提取所述面審視頻中的音頻流數據和視頻流數據;
對所述音頻流數據進行聲紋識別處理,得到聲紋波動數據,當所述聲紋波動數據超出預設的基礎情緒數據波動范圍時,根據所述聲紋波動數據超出所述基礎情緒數據波動范圍部分的數據量,確定所述目標用戶的情緒變化數據;
獲取所述視頻流數據中的目標用戶面部圖像,對所述目標用戶面部圖像進行面部膚色變化分析,根據分析結果中的膚色異常面部區域的標注數量與異常等級,得到所述目標用戶的膚色狀況信息;
對所述面審視頻分別進行語音識別和微表情識別處理,得到所述目標用戶的面審問答文本和微表情識別結果;
根據所述情緒變化數據、所述膚色狀況信息、所述面審問答文本和所述微表情識別結果分別所對應的維度,以及各所述維度的預設維度等級標準,確定所述目標用戶各維度的等級數據,根據所述各維度的預設權重比數據和所述等級數據,得到所述目標用戶的面審評估結果。
在其中一個實施例中,所述獲取目標用戶的面審視頻,提取所述面審視頻中的音頻流數據和視頻流數據包括:
獲取目標用戶的面審視頻和所述面審視頻的問答時間記錄數據,
查找所述問答時間記錄數據中單個問題的問答開始時間戳,以各所述問答開始時間戳為節點,對所述面審視頻進行視頻片段分割;
提取各所述視頻片段的音頻流數據和視頻流數據。
在其中一個實施例中,所述對所述音頻流數據進行聲紋識別處理,得到聲紋波動數據,當所述聲紋波動數據超出預設的基礎情緒數據波動范圍時,根據所述聲紋波動數據超出所述基礎情緒數據波動范圍部分的數據量,確定所述目標用戶的情緒變化數據包括:
提取所述音頻流數據中的聲紋數據;
提取所述聲紋數據中的基頻信息與語速信息,查找預設的情緒因子數據庫,確定所述基頻信息與語速信息對應的基礎情緒因子,所述情緒因子數據庫中存儲有各基礎情緒因子對應的基礎情緒數據波動范圍,包括基頻信息閾值范圍與語速信息閾值范圍;
根據預設的基頻閾值范圍與所述基頻信息的幅值變化、以及預設的語速閾值范圍與所述語速信息的幅值變化,獲得所述聲紋波動數據;
根據所述聲紋波動數據超出所述基礎情緒數據波動范圍部分的數據量,確定所述目標用戶的情緒變化數據。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于深圳壹賬通智能科技有限公司,未經深圳壹賬通智能科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910522249.1/2.html,轉載請聲明來源鉆瓜專利網。





