[發明專利]視頻處理方法、裝置、計算機設備及可讀存儲介質

在審

• 申請號: 202211078027.3
• 申請日: 2022-09-05
• 公開（公告）號: CN115482485A
• 公開（公告）日: 2022-12-16
• 發明（設計）人: 張偉;何得淮;蔣靜文;何行知;姚佳;顏泳濤;王壘;路浩
• 申請（專利權）人: 四川大學華西醫院;四川省監獄管理局
• 主分類號: G06V20/40
• 分類號: G06V20/40;G06V10/46;G06V40/16;G06N3/08;G06N3/04
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 賈耀斌

本發明實施例公開了一種視頻處理方法、裝置、計算機設備及可讀存儲介質，包括：獲取視頻文件；根據預設圖像歸一化規則對所述視頻文件進行預處理，以得到目標圖像序列；分別對目標圖像序列進行人臉檢測和人體檢測，以得到目標對象的人臉關鍵點和人體關鍵點；基于人臉關鍵點識別對應目標對象的情緒狀態和困倦狀態；基于人體關鍵點識別對應目標對象的肢體姿態和肢體運動狀態；根據情緒狀態、困倦狀態、肢體姿態以及肢體運動狀態判斷目標對象的行為集合是否包括預設行為，并在目標對象的行為集合包括預設行為時，向預設終端發送提示信息。本發明通過智能識別視頻中目標對象的行為事件、情緒狀態，能夠更加穩定、準確的預測隱患行為。

技術領域

本發明涉及智能安防技術領域，尤其涉及一種視頻處理方法、裝置、計算機設備及可讀存儲介質。

背景技術

對監控視頻的視頻分析技術是智能安防等領域的關鍵技術，現有對監控視頻的視頻分析方案中，多通過傳統圖像算法識別圖像畫面中的光影變化情況，并通過光影變化情況進行目標檢測和目標跟蹤，根據傳統圖像識別算法識別目標對象的異常行為具有抗干擾能力弱、誤報率高等缺陷。

且現有視頻監控方案中，缺乏對目標對象的情緒狀態的識別手段，僅依靠目標對象的行為模板來判斷目標是否處于危險行為狀態，容易出現錯誤識別的問題。

發明內容

為了解決上述技術問題，本申請實施例提供了一種視頻處理方法、裝置、計算機設備及可讀存儲介質，具體方案如下：

第一方面，本申請實施例提供了一種視頻處理方法，包括：

獲取視頻文件；

根據預設圖像歸一化規則對所述視頻文件進行預處理，以得到目標圖像序列；

分別對所述目標圖像序列進行人臉檢測和人體檢測，以得到目標對象的人臉關鍵點和人體關鍵點；

基于所述人臉關鍵點識別對應目標對象的情緒狀態和困倦狀態；

基于所述人體關鍵點識別對應目標對象的肢體姿態和肢體運動狀態；

根據所述情緒狀態、所述困倦狀態、所述肢體姿態以及所述肢體運動狀態判斷所述目標對象的行為集合是否包括預設行為，并在所述目標對象的行為集合包括所述預設行為時，向預設終端發送提示信息。

根據本申請實施例的一種具體實施方式，所述分別對所述目標圖像序列進行人臉檢測和人體檢測，以得到目標對象的人臉關鍵點和人體關鍵點，包括：

通過哈爾特征識別模型檢測并截取所述目標圖像序列中每一幀圖像的人臉區域；基于人臉關鍵點檢測網絡識別所述人臉區域中的人臉關鍵點，以得到所述目標對象的人臉關鍵點；

通過Faster RCNN模型檢測并截取所述目標圖像序列中每一幀圖像的人體區域；通過高分辨率網絡識別所述人體區域的人體關鍵點，以得到所述目標對象的人體關鍵點。

根據本申請實施例的一種具體實施方式，所述方法還包括：

基于預設細粒度頭部姿態估計網絡識別所述人臉區域，以得到目標對象的頭部姿態；

所述根據所述情緒狀態、所述困倦狀態、所述肢體姿態以及所述肢體運動狀態判斷所述目標對象的行為集合是否包括預設行為，還包括：

根據所述情緒狀態、所述困倦狀態、所述頭部姿態、所述肢體姿態以及所述肢體運動狀態判斷所述目標對象的行為集合是否包括預設行為。

根據本申請實施例的一種具體實施方式，所述基于所述人臉關鍵點識別對應目標對象的情緒狀態，包括：

將第一數量的人臉關鍵點劃分為第二數量的人臉關鍵區域，其中，所述第一數量大于所述第二數量；

基于預設環狀神經網絡模型識別所述人臉關鍵區域，并得到對應所述目標對象的情緒狀態。