[發明專利]一種基于視頻分析的餐飲企業食品安全監管方法及系統

在審

• 申請號: 201911385904.X
• 申請日: 2019-12-29
• 公開（公告）號: CN111223011A
• 公開（公告）日: 2020-06-02
• 發明（設計）人: 陳晉;馮雪峰;陳圣愛
• 申請（專利權）人: 航天信息股份有限公司
• 主分類號: G06Q50/12
• 分類號: G06Q50/12;G06K9/00;G08B19/00
• 代理公司: 北京工信聯合知識產權代理有限公司 11266
• 代理人: 姜麗樓

1.一種基于視頻分析的餐飲企業食品安全監管方法，其特征在于，所述方法包括：

獲取監控設備實時采集到的視頻數據，并對監控設備實時采集到的視頻數據進行預處理，以獲取圖像幀隊列；

利用基于敏感行為規則確定的敏感行為分析模型，對圖像幀隊列中的圖像幀數據進行圖像分析，以分析所述圖像幀數據中是否存在敏感行為；

確定監控設備實時采集到的視頻數據所涉及的內容類別，獲取與內容類別相關聯的預設樣本數據，利用預設樣本數據對監控設備實時采集到的視頻數據的圖像幀隊列中圖像幀數據進行內容識別，以確定所述圖像幀數據中是否存在敏感行為；

當確定圖像幀數據中存在敏感行為時，根據預設的敏感行為和報警方式之間對應關系確定報警方式，并根據確定的報警方式發送告警信息至主控平臺。

2.根據權利要求1所述的方法，其特征在于，所述對監控設備實時采集到的視頻數據進行預處理，以獲取圖像幀隊列，包括：

通過openCV和ffmpeg技術對監控設備實時采集到的視頻數據進行解碼和分幀處理；

對經過解碼和分幀處理后的視頻圖像進行值濾波去噪，以獲取圖像幀隊列。

3.根據權利要求1所述的方法，其特征在于，所述利用基于敏感行為規則確定的敏感行為分析模型，對圖像幀隊列中的圖像幀數據進行圖像分析，以分析圖像幀數據中是否存在關注目標，包括：

利用人臉識別單元分析并處理所述圖像幀數據中的人臉信息；若存在與目標數據庫中的人臉圖像不匹配的人臉信息，則確定該圖像幀數據中存在關注目標；

利用行為識別單元分析并處理所述圖像幀數據中的行為特征序列，若存在與目標數據庫中相同的行為，則確定該圖像幀數據中存在敏感行為；

利用事件識別單元分析并處理所述圖像幀數據中的事件圖像信息，若存在與目標數據庫中相同的特征事件，則確定該圖像幀數據中存在敏感行為。

4.根據權利要求1所述的方法，其特征在于，所述內容類別為面部類型，所述與內容類別相關聯的預設樣本數據包括:佩戴規定口罩的面部樣本數據和佩戴規定帽子的面部樣本數據；或

所述內容類別為上臂類型，所述與內容類別相關聯的預設樣本數據包括:穿著規定服飾的上臂樣本數據；或

所述內容類別為動作類型，所述與內容類別相關聯的預設樣本數據包括:違規動作樣本數據；或

所述內容類別為異物類型，所述與內容類別相關聯的預設樣本數據包括:至少一種異常物體的樣本數據。

5.根據權利要1所述的方法，其特征在于，所述方法還包括：

通過時間序列和連續多幀關系對識別到的敏感行為進行過濾，包括：

判斷相鄰兩幀之間的識別到的敏感行為是否相同，若是，則進行下一步，若不是，則排除識別到的敏感行為；

判斷相鄰兩幀之間的重疊率是否合理，若合理，則確定識別到敏感行為，若不合理，則排除識別到的敏感行為。

6.一種基于視頻分析的餐飲企業食品安全監管系統，其特征在于，所述系統包括：

數據獲取模塊，用于獲取監控設備實時采集到的視頻數據，并對監控設備實時采集到的視頻數據進行預處理，以獲取圖像幀隊列；

數據分析模塊，用于利用基于敏感行為規則確定的敏感行為分析模型，對圖像幀隊列中的圖像幀數據進行圖像分析，以分析所述圖像幀數據中是否存在敏感行為；

數據識別模塊，用于確定監控設備實時采集到的視頻數據所涉及的內容類別，獲取與內容類別相關聯的預設樣本數據，利用預設樣本數據對監控設備實時采集到的視頻數據的圖像幀隊列中圖像幀數據進行內容識別，以確定所述圖像幀數據中是否存在敏感行為；

報警模塊，用于當確定圖像幀數據中存在敏感行為時，根據預設的敏感行為和報警方式之間對應關系確定報警方式，并根據確定的報警方式發送告警信息至主控平臺。

7.根據權利要求6所述的系統，其特征在于，所述數據獲取模塊，對監控設備實時采集到的視頻數據進行預處理，以獲取圖像幀隊列，包括：

通過openCV和ffmpeg技術對監控設備實時采集到的視頻數據進行解碼和分幀處理；

對經過解碼和分幀處理后的視頻圖像進行值濾波去噪，以獲取圖像幀隊列。