[發(fā)明專利]一種張閉動作識別的方法和系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201811474038.7
• 申請日: 2018-12-04
• 公開（公告）號: CN111274846B
• 公開（公告）日: 2023-09-19
• 發(fā)明（設(shè)計）人: 張修寶;沈海峰
• 申請（專利權(quán)）人: 北京嘀嘀無限科技發(fā)展有限公司
• 主分類號: G06V40/20
• 分類號: G06V40/20;G06V40/16;G06V10/26
• 代理公司: 成都七星天知識產(chǎn)權(quán)代理有限公司 51253
• 代理人: 袁春曉

1.一種張閉動作的識別方法，其特征在于，包括：

獲取多幀人臉圖像，所述多幀人臉圖像拍攝于不同時刻；

在所述多幀人臉圖像中：定位出至少一個面部器官區(qū)域，并獲取反映所述至少一個面部器官區(qū)域面積大小的參數(shù)；

基于所述多幀人臉圖像對應(yīng)的多個所述參數(shù)，確定位于一個時間周期中的人臉圖像及其對應(yīng)的所述參數(shù)；其中，所述時間周期包括起始點和結(jié)束點，所述時間周期與所述至少一個面部器官的至少一次張閉過程匹配，以及所述匹配包括所述時間周期的起始點和結(jié)束點分別對應(yīng)于所述張閉過程的張開時刻和閉合時刻；

基于所述時間周期中的人臉圖像對應(yīng)的所述參數(shù)確定張閉動作速度，基于所述張閉動作速度確定所述至少一個面部器官是否存在張閉動作；其中，所述張閉動作速度基于所述時間周期內(nèi)的多幀人臉圖像得到。

2.如權(quán)利要求1所述的方法，其特征在于，至少一個面部器官的所述參數(shù)包括以下中的至少一種：面部器官區(qū)域的面積值、面部器官區(qū)域的面積值與該面部器官某一方向上長度的比值或面部器官至少兩個方向上的長度比值。

3.如權(quán)利要求2所述的方法，其特征在于，所述基于所述時間周期中的人臉圖像對應(yīng)的所述參數(shù)確定張閉動作速度，基于所述張閉動作速度確定所述至少一個面部器官是否存在張閉動作，還包括：

基于位于所述時間周期中的人臉圖像對應(yīng)的所述參數(shù)確定張閉動作幅度；以及

基于所述張閉動作幅度和張閉動作速度確定所述至少一個面部器官是否存在張閉動作。

4.如權(quán)利要求3所述的方法，其特征在于，所述張閉動作幅度與位于所述時間周期內(nèi)的所述參數(shù)中的最大值與最小值的比值正相關(guān)。

5.如權(quán)利要求3所述的方法，其特征在于，所述張閉動作速度與所述時間周期中，所述參數(shù)中最大值對應(yīng)的人臉圖像前和/或后的人臉圖像幀數(shù)負相關(guān)。

6.如權(quán)利要求3所述的方法，其特征在于，所述基于所述張閉動作幅度和張閉動作速度確定所述至少一個面部器官是否存在張閉動作，包括：

判斷所述張閉動作幅度是否大于第一閾值；

判斷所述張閉動作速度是否小于第二閾值；

當(dāng)所述張閉動作幅度大于第一閾值且所述張閉動作速度小于第二閾值時，確定存在張閉動作。

7.如權(quán)利要求1所述的方法，其特征在于，所述基于所述多幀人臉圖像對應(yīng)的多個所述參數(shù)，確定位于一個時間周期中的人臉圖像及其對應(yīng)的參數(shù)，包括：

在所述多幀人臉圖像上建立滑動窗口；所述滑動窗口的長度小于所述多幀人臉圖像的幀數(shù)；

對于每個滑動窗口，

判斷滑動窗口中的人臉圖像對應(yīng)的多個所述參數(shù)是否滿足第一組預(yù)設(shè)條件，響應(yīng)于所述多個所述參數(shù)滿足第一組預(yù)設(shè)條件，確定該滑動窗口中存在一次張閉過程的起始點；或

判斷滑動窗口中的人臉圖像對應(yīng)的多個所述參數(shù)是否滿足第二組預(yù)設(shè)條件，響應(yīng)于所述多個所述參數(shù)滿足第二組預(yù)設(shè)條件，確定該滑動窗口中存在一次張閉過程的結(jié)束點。

8.如權(quán)利要求7所述的方法，其特征在于，所述第一組預(yù)設(shè)條件用于檢測滑動窗口中的人臉圖像對應(yīng)的多個所述參數(shù)中單調(diào)遞增的起始點。

9.如權(quán)利要求7所述的方法，其特征在于，所述第二組預(yù)設(shè)條件用于檢測滑動窗口中的人臉圖像對應(yīng)的多個所述參數(shù)中的極小值點。