[發明專利]微笑表情檢測方法、裝置、計算機設備及存儲介質

有效

• 申請號: 201911037530.2
• 申請日: 2019-10-29
• 公開（公告）號: CN110941992B
• 公開（公告）日: 2023-09-05
• 發明（設計）人: 李占川
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V20/40;G10L15/22;G06F3/01
• 代理公司: 深圳眾鼎專利商標代理事務所(普通合伙) 44325
• 代理人: 黃章輝

本發明公開了一種微笑表情檢測方法、裝置、計算機設備及存儲介質。所述方法包括：通過聲源定位獲取預設聲源位置的語音數據轉換成的文本數據與目標文本數據匹配成功時，根據預設聲源位置的人員的圖像確定人員的身份信息；在人員的圖像中獲取的手勢類型為預設手勢項時，確定檢測微笑表情開始，令攝像設備開啟連續拍攝人員的視頻信息；通過微笑識別模型識別人員的視頻信息中放大之后的面部預設位置的圖片，并獲取微笑識別模型輸出的識別結果；在接收到檢測微笑表情終止指令時，令攝像設備停止拍攝人員的視頻信息。本發明減少了存儲視頻信息的數據量，也減少了人工追溯表情時間段的視頻信息的查詢量，提升了微笑表情檢測的精準性。

技術領域

本發明涉及圖像檢測領域，尤其涉及一種微笑表情檢測方法、裝置、計算機設備及存儲介質。

背景技術

對于收費站服務人員的微笑服務檢測(也即服務人員面部的微笑表情檢測)，目前收費站只能人工檢測攝像設備拍攝的所有在崗的服務人員是否有對繳費車輛的車主實行微笑服務的視頻數據，以此來對服務人員的工作質量作出一定的評估；但此種方式存在以下的問題：收費站并非一直都有車輛通過，在并無車輛通過的時候，并不要求服務人員全程微笑，但由于視頻數據是時刻對準服務人員全程拍攝的，而檢測過程也是針對上述所有的視頻數據，如此，首先會導致記錄很多非服務時間的微笑服務的視頻數據，會造成對微笑服務的評估不客觀準確，進而不能準確地體現員工的服務質量；另一方面，全程視頻數據的錄制和檢測，會造成檢測視頻數據的人員的時間浪費，增加了工作量，并且，在人工檢測過程中，若有車輛通過的場景下可能也需要不斷放大或縮小等操作才能觀看到清楚的視頻數據，操作繁瑣，在檢測完成后數據庫中也需要占用大量的存儲空間來保存所有的視頻數據，維護成本相對較高；因此，需尋找一種可解決上述問題的技術方案成為本領域人員亟需待解的問題。

發明內容

基于此，有必要針對上述技術問題，提供一種微笑表情檢測方法、裝置、計算機設備及存儲介質，用于避免檢測微笑表情的服務器處于一直工作的狀態，提升了微笑表情檢測的精準性。

一種微笑表情檢測方法，包括：

通過聲源定位獲取預設聲源位置的語音數據，并將所述語音數據轉換成文本數據；

在所述文本數據與目標文本數據匹配成功時，獲取攝像設備拍攝的所述預設聲源位置的人員的圖像，并確認所述人員的身份信息；

自所述人員的圖像中提取所述人員的上肢位置的人體關鍵點，并根據所述人體關鍵點獲取手勢類型；

在獲取的所述手勢類型為預設手勢項時，確定檢測微笑表情開始，令所述攝像設備開啟連續拍攝所述人員的視頻信息；

按照預設頻率自所述視頻信息中提取所述人員的面部預設位置的圖片，并將所述面部預設位置的圖片放大至預設比例，通過微笑識別模型識別放大之后的所述面部預設位置的圖片，并獲取所述微笑識別模型輸出的與所述面部預設位置的圖片對應的識別結果；所述識別結果為微笑或者不微笑；

在接收到檢測微笑表情終止指令時，令所述攝像設備停止拍攝所述人員的所述視頻信息，并根據接收到視頻錄制指令之前錄制的所述視頻信息所對應的所述識別結果，確定所述人員的微笑數據等級，并將所述微笑數據等級與所述人員的所述身份信息關聯。

一種微笑表情檢測裝置，包括：

轉換模塊，用于通過聲源定位獲取預設聲源位置的語音數據，并將所述語音數據轉換成文本數據；

確定模塊，用于在所述文本數據與目標文本數據匹配成功時，獲取攝像設備拍攝的所述預設聲源位置的人員的圖像，并確認所述人員的身份信息；

第一獲取模塊，用于自所述人員的圖像中提取所述人員的上肢位置的人體關鍵點，并根據所述人體關鍵點獲取手勢類型；

開啟模塊，用于在獲取的所述手勢類型為預設手勢項時，確定檢測微笑表情開始，令所述攝像設備開啟連續拍攝所述人員的視頻信息；