[發明專利]一種人臉表情檢測方法、裝置、設備、系統及介質

在審

• 申請號: 201810977625.1
• 申請日: 2018-08-24
• 公開（公告）號: CN109063679A
• 公開（公告）日: 2018-12-21
• 發明（設計）人: 徐波
• 申請（專利權）人: 廣州多益網絡股份有限公司;廣東利為網絡科技有限公司;多益網絡有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 麥小嬋;郝傳鑫

本發明公開了一種人臉表情檢測方法、裝置、設備、系統及計算機可讀存儲介質，其方法包括：接收頭戴式攝像機傳輸的每一幀的視頻畫面；根據預設的人臉檢測模型，對所述視頻畫面進行人臉檢測；當檢測到所述視頻畫面存在人臉時，根據預先建立的關鍵點檢測模型，獲取所述人臉的關鍵點坐標；根據所述關鍵點坐標以及預先存儲的對應于所述人臉的靜態關鍵點坐標，進行人臉表情檢測；本發明簡便且高效地實現人臉表情檢測過程，提高運行效率，實現運行資源的綜合利用。

技術領域

本發明涉及計算機技術領域，尤其涉及一種人臉表情檢測方法、裝置、設備、系統及計算機可讀存儲介質。

背景技術

近年來，隨著計算機圖形學的發展，計算機動畫技術合成人的面部表情動畫是當前動畫學科研究的一個重點之一，它使得動畫制作者能夠以演員的表情直接驅動畫形象模型，受到了動畫制作者們更多的關注。面部表情捕捉能夠實時地檢測、記錄表演者的表情，轉化為數字化的“抽象表情”，以便動畫軟件將它“賦予”模型，使模型具有和表演者一樣的表情，并生成最終的表情動畫序列。

現有的較為成熟的表情捕捉檢測技術是標記點式表情捕捉技術，它采集的數據是以幀為單位的序列標識點(Marker)點集數據，在表演者的臉部關鍵點貼上Marker，視覺系統將識別和處理這些Maker，就可以實現表情捕捉，該技術具有保持自然特征點形態穩定且排除光照條件的不穩定因素的特點；另一種表情捕捉檢測技術是網絡攝像頭放在一個固定地方，人的頭部在距離攝像頭不遠處，系統再對采集到的畫面進行相關檢測。

但是，在實現本發明的過程中，發明人發現：雖然上述第一種實現方案在表情捕捉技術上達到可觀的效果，但費用十分昂貴且有缺陷。例如，高端動作捕捉品牌Vicon和魔神采用的方案是肢體捕捉的同時，在人臉粘貼標記點，利用高分辨率系統同步捕捉肢體和面部細節的運動。該技術雖然可達到肢體和表情數據高度同步，但由于面部細節標記點過多，適用于肢體捕捉的大視場捕捉對面部稠密標記點跟蹤容易失效，導致大量跳點問題發生，后處理十分繁雜，成為實際應用的最大障礙，而且該方案需要在用戶臉上黏貼標記點，在影響用戶動作的同時也降低了用戶的使用體驗；以上第二種實現方案由于人臉是否在攝像機的攝像范圍內的不定性，人臉一旦脫離攝像頭的捕捉范圍或者頭部姿態有較大程度的變化，針對人臉的相關檢測就會變得無用，導致結果出現數據中斷或不準確，而且也增加了設備檢測無效圖像的負擔，加快了設備的損耗。

發明內容

針對上述問題，本發明的目的在于提供一種人臉表情檢測方法、裝置、設備、系統及計算機可讀存儲介質，簡便且高效地實現人臉表情檢測過程。

第一方面，本發明實施例提供了一種人臉表情檢測方法，包括以下步驟：

接收頭戴式攝像機傳輸的每一幀的視頻畫面；

根據預設的人臉檢測模型，對所述視頻畫面進行人臉檢測；

當檢測到所述視頻畫面存在人臉時，根據預先建立的關鍵點檢測模型，獲取所述人臉的關鍵點坐標；

根據所述關鍵點坐標以及預先存儲的對應于所述人臉的靜態關鍵點坐標，進行人臉表情檢測。

在第一方面的第一種實現方式中，所述頭戴式攝像機包括頭戴式裝置、攝像頭以及數據傳輸線；

所述頭戴式裝置包括頭盔本體、連接桿、固定支架、第一繃帶、第二繃帶、第一卡扣以及第二卡扣；

所述連接桿的一端連接所述頭盔本體尾端，所述連接桿的另一端連接所述固定支架；

所述第一繃帶的一端固定連接所述頭盔本體，所述第一繃帶的另一端連接所述第一卡扣的一端；

所述第二繃帶的一端固定連接所述頭盔本體，所述第二繃帶的另一端連接所述第二卡扣的一端；

所述第一卡扣的另一端，用于與所述第二卡扣的另一端卡接；