[發明專利]一種吃飯動作的識別方法和裝置

有效

• 申請號: 201611187196.5
• 申請日: 2016-12-20
• 公開（公告）號: CN108205651B
• 公開（公告）日: 2021-04-06
• 發明（設計）人: 彭巍;范曉暉;楊新苗
• 申請（專利權）人: 中國移動通信有限公司研究院;中國移動通信集團公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 高潔;姚開麗

1.一種吃飯動作的識別方法，其特征在于，該方法包括：

對獲取的每幀視頻圖像進行檢測，確定檢測到人臉；

以所述檢測到的人臉為參照選取每幀視頻圖像中的吃飯活動區域，并依據第一預設條件對所述吃飯活動區域進行區域劃分，得到多個視頻圖像區域；

對劃分得到的與手部對應的所述視頻圖像區域進行運動區域檢測，得到所述視頻圖像區域中的運動區域；

對所述運動區域進行膚色檢測，得到所述運動區域中的膚色區域；

獲取所述人臉底部位置的縱坐標y₁和所述膚色區域頂部的縱坐標y₂，并計算兩者的差值△y＝y₁-y₂；如果在T時間內，所述△y滿足第二預設條件的次數大于第一閾值m，則確定檢測到吃飯動作；

其中，所述第二預設條件為：在t時間內，所述△y滿足條件-H/4＜△y＜H的概率超過第二閾值p；所述t＜T；所述H為所述視頻圖像中人臉的高度。

2.根據權利要求1所述的方法，其特征在于，所述以所述檢測到的人臉為參照選取每幀視頻圖像中的吃飯活動區域，包括：

以所述檢測到的人臉為參照，在豎直方向上，所述吃飯活動區域的頂部位于所述人臉的頂部；在水平方向上，所述人臉位于所述吃飯活動區域的中間位置；所述吃飯活動區域為矩形，所述矩形的高為3H，寬為5W，所述H為所述視頻圖像中人臉的高度，所述W為所述視頻圖像中人臉的寬度。

3.根據權利要求2所述的方法，其特征在于，所述依據第一預設條件對所述吃飯活動區域進行區域劃分，包括：

在水平方向上從左到右將所述吃飯活動區域劃分成三個區域，中間的第二區域為所述人臉所在的區域，第二區域的左側為第一區域，第二區域的右側為第三區域；所述第一區域、第二區域和第三區域的高均為3H，所述第一區域、第二區域和第三區域的寬分別為2W、W和2W。

4.根據權利要求3所述的方法，其特征在于，所述對劃分得到的與手部對應的所述視頻圖像區域進行運動區域檢測，包括：

對所述第一區域和/或第三區域的視頻圖像進行運動區域檢測。

5.一種吃飯動作的識別裝置，其特征在于，該裝置包括：

人臉檢測模塊，用于對獲取的每幀視頻圖像進行檢測，確定檢測到人臉；

區域劃分模塊，用于以所述檢測到的人臉為參照選取每幀視頻圖像中的吃飯活動區域，并依據第一預設條件對所述吃飯活動區域進行區域劃分，得到多個視頻圖像區域；

運動檢測模塊，用于對劃分得到的與手部對應的所述視頻圖像區域進行運動區域檢測，得到所述視頻圖像區域中的運動區域；

膚色檢測模塊，用于對所述運動區域進行膚色檢測，得到所述運動區域中的膚色區域；

動作檢測模塊，用于獲取所述人臉底部位置的縱坐標y₁和所述膚色區域頂部的縱坐標y₂，并計算兩者的差值△y＝y₁-y₂；判斷在T時間內，所述△y滿足第二預設條件的次數大于第一閾值m，則確定檢測到吃飯動作；

其中，所述第二預設條件為：在t時間內，所述△y滿足條件-H/4＜△y＜H的概率超過第二閾值p；所述t＜T；所述H為所述視頻圖像中人臉的高度。

6.根據權利要求5所述的裝置，其特征在于，所述區域劃分模塊包括：

選取單元，用于以所述檢測到的人臉為參照選取每幀視頻圖像中的吃飯活動區域；

劃分單元，用于依據第一預設條件對所述吃飯活動區域進行區域劃分，得到多個視頻圖像區域。

7.根據權利要求6所述的裝置，其特征在于，

所述選取單元，用于以所述檢測到的人臉為參照，在豎直方向上，所述吃飯活動區域的頂部位于所述人臉的頂部；在水平方向上，所述人臉位于所述吃飯活動區域的中間位置；所述吃飯活動區域為矩形，所述矩形的高為3H，寬為5W，所述H為所述視頻圖像中人臉的高度，所述W為所述視頻圖像中人臉的寬度。