[發明專利]一種基于應用場景的監控預警方法

有效

• 申請號: 202211441811.6
• 申請日: 2022-11-17
• 公開（公告）號: CN115761633B
• 公開（公告）日: 2023-07-21
• 發明（設計）人: 呂建榮;熊攀;楊陽
• 申請（專利權）人: 深圳市陽光博睿教育技術有限公司
• 主分類號: G06V20/52
• 分類號: G06V20/52;G06V10/75;G06V20/40;G06V40/16;G08B13/00;G08B13/196;G08B31/00;G10L15/26;G10L25/51
• 代理公司: 深圳市中科創為專利代理有限公司 44384
• 代理人: 謝志龍;彭濤

1.一種基于應用場景的監控預警方法，其特征在于，包括：

步驟1：若應用系統可清楚劃分監控核心點，則根據當前監控核心點，選擇預警機制，若監控核心為非入侵式監控，則進入步驟2；若監控核心為防入侵式監控，則進入步驟3；若應用系統無法清楚劃分監控核心點，則進入步驟4；

所述步驟2為：啟動語音關鍵詞識別監控，所述步驟2包括：步驟21和步驟22；

所述步驟21為：進行語音數據處理；

所述步驟22為：進行關鍵詞語音識別；若當前語音特征值與關鍵詞模板庫中對應的特征值相匹配，則首先標識當前語音起始幀對應的時間為當前預警事件起始時刻，接著開啟預警詞累加，用預警詞出現的頻次標識當前預警事件的權重，開啟當前預警事件結束時刻檢測；

若當前語音特征值與關鍵詞模板庫中對應的特征值不匹配，若未開啟當前預警事件結束時刻檢測，則直接進行下一有效語音數據的處理；若已開啟當前預警事件結束時刻檢測，則先進行不匹配次數累加，當其達到判定閾值進一步標識當前預警事件結束時刻當前語音結束幀對應的時間，然后進行下一有效語音數據的處理；

所述步驟3為：進行音視頻二級監控，所述步驟3包括步驟31和步驟32；

所述步驟31為：啟動音頻預警點檢測，當檢測到音頻有效數據，則設置臨時預警時間點為當前音頻有效數據起始幀對應的時間點，然后進入所述步驟32；否則結束；

所述步驟32為：啟動視頻預警檢測，所述步驟32包括步驟321和步驟322，

所述步驟321為：若當前幀為I幀或者臨時預警時間點對應的圖像幀，則采用第一模式對當前幀進行視頻預警處理；否則，采用第二模式對當前幀進行視頻預警處理；

所述第一模式為：通過基于壓縮信息的膚色檢測方法，對當前幀進行膚色區域監測，若不存在膚色區域，則判定為無預警可能，令標識符flag＝0；若存在膚色區域，對當前幀檢測出的所有膚色區域按其連通性劃分為不同的子集，對每一個子集進行五官定位，若五官定位均不成功，則進一步判定為無預警可能，令標識符flag＝0；否則，對每一個五官定位成功的子集進一步進行人物匹配，若均與預先錄入的安全人物匹配，則判定為無預警可能，令標識符flag＝0；否則，判定為達到視頻預警標準則，令標識符flag＝1，標識好每個與安全人物不匹配的人臉區域為預警人物，其信息記為inf(i)＝(ts_i，td_i)，并標識當前預警事件起始時刻為當前幀的播放序號，其中i為預警人物編號，inf(i)為預警人物i的信息，ts_i為預警人物i出現的幀號，td_i為預警人物i消失的幀號；

所述第二模式包括步驟A1、步驟A2和步驟A3；

所述步驟A1為：若標識符flag＝0，則進入所述步驟A2；否則，進入所述步驟A3；

所述步驟A2為：判斷當前幀是否存在I塊，若不存在，則直接判定當前幀無預警可能，進入步驟322；否則，首先將所有I塊劃入待檢測集合，并將連通的I塊劃為不同的子集，接著對每一個子集采用所述第一模式的方法，進行視頻預警處理，若判定為無預警可能，進入步驟322；否則，判定為達到視頻預警標準，令標識符flag＝1，標識好每個與安全人物不匹配的人臉區域為預警人物，其信息記為inf(i)＝(ts_i，td_i)，并標識當前預警事件起始時刻為當前幀的播放序號，進入所述步驟322；

所述步驟A3為：進行預警人物跟蹤及新預警人物監控；

進行預警人物跟蹤的方法為：將當前幀中其參考塊是被標識為預警人物的所有幀間預測塊，標識為對應的預警人物，更新對應預警人物信息及當前預警事件結束時間為當前幀號；

進行新預警人物監控的方法為：首先將當前幀中所有I塊劃入待檢測集合；若待檢測集合為空，則判定為當前幀無新入侵人物，進入所述步驟；否則，則將待檢測集合中I塊按其連通性劃為不同的子集，接著對每一個子集采用第一模式的方法，進行視頻預警處理，若判定為無預警可能則進入所述步驟322；否則，標識好每個與安全人物不匹配的人臉區域為新預警人物，其信息記為inf(i)＝(ts_i，td_i)，進入所述步驟322；

所述步驟322為：若下一幀存在，則設置下一幀為當前檢測視頻幀，重回步驟321；否則，結束；

所述步驟4為：進行自適應音視頻監控，所述步驟4包括步驟41和步驟42；

所述步驟41為：啟動音頻預警點檢測，當檢測到音頻有效數據，則設置臨時預警時間點為當前音頻有效數據起始幀對應的時間點，然后進入所述步驟42；否則結束；

所述步驟42包括步驟421和步驟422；

所述步驟421為：若當前幀為I幀或者臨時預警時間點對應的圖像幀，則采用第三模式對當前幀進行視頻預警處理；否則，采用第四模式對當前幀進行視頻預警處理；

所述第三模式為：對當前幀行膚色區域檢測和五官定位，若無膚色區域或五官定位不成功，則判定為無預警可能，令標識符flag＝0；否則，對每一個五官定位成功的子集進一步進行人物匹配，若均與預先錄入的安全人物匹配，則令標識符flag＝-1，找到當前圖像幀對應的語音幀，對其使用所述步驟2進行語音關鍵詞識別監控，進行預警；否則，判定為達到視頻預警標準，令標識符flag＝1，標識好每個與安全人物不匹配的人臉區域為預警人物，其信息記為inf(i)＝(ts_i，td_i)，并標識當前預警事件起始時刻為當前幀的播放序號；

所述第四模式包括步驟B1、步驟B2和步驟B3；

所述步驟B1為：若標識符flag＝0，則進入所述步驟B2，只進行新預警人物監控，若標識符flag＝1，則進入所述步驟B3，進行預警人物跟蹤及新預警人物監控；

所述步驟B2為：判斷當前幀是否存在I塊，若不存在I塊，則直接判斷當前幀無預警可能，進入步驟422；若存在I塊，則將所有的I塊劃入待檢測合集，并將連通的I塊劃為不同的子集，進行視頻預警處理，若判定為無預警可能，進入步驟422；否則，若均與預先錄入的安全人物匹配，則令標識符flag＝-1，找到當前圖像幀對應的語音幀，對其使用所述步驟2進行語音關鍵詞識別監控，進行預警；否則判定為達到視頻預警標準則，令標識符flag＝1，標識好每個與安全人物不匹配的人臉區域為預警人物，其信息記為inf(i)＝(ts_i，td_i)，并標識當前預警事件起始時刻為當前幀的播放序號，進入所述步驟422；

所述步驟B3為：使用所述步驟A3的方法進行預警人物跟蹤及新預警人物監控；

所述步驟422為：若下一幀存在，則設置下一幀為當前檢測視頻幀，重回所述步驟321；否則，結束。