[發(fā)明專利]行為識(shí)別方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201710544459.1
• 申請(qǐng)日: 2017-07-06
• 公開（公告）號(hào): CN107247946B
• 公開（公告）日: 2021-01-26
• 發(fā)明（設(shè)計(jì)）人: 陶鐵牛;王幗筊;張麗媛;趙愛巧
• 申請(qǐng)（專利權(quán)）人: 北京安寧威爾科技發(fā)展有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06T7/20
• 代理公司: 北京超凡志成知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11371
• 代理人: 王術(shù)蘭

1.一種行為識(shí)別方法，應(yīng)用于計(jì)算設(shè)備，其特征在于，所述計(jì)算設(shè)備包括用于進(jìn)行行為識(shí)別的識(shí)別模型，所述方法包括：

對(duì)采集的可見光圖像及紅外圖像進(jìn)行圖像處理得到待跟蹤目標(biāo)區(qū)域；

檢測(cè)所述待跟蹤目標(biāo)區(qū)域是否包括行人；

在包括行人時(shí)，對(duì)行人進(jìn)行跟蹤，并在跟蹤過程中檢測(cè)行人邊緣以從所述待跟蹤目標(biāo)區(qū)域中獲得行人待識(shí)別區(qū)域；

將所述行人待識(shí)別區(qū)域輸入到識(shí)別模型中得到所述行人的行為識(shí)別結(jié)果；

其中，所述識(shí)別模型包括第一識(shí)別模型及第二識(shí)別模型，所述將所述行人待識(shí)別區(qū)域輸入到識(shí)別模型中得到行為識(shí)別結(jié)果的步驟包括：將所述行人待識(shí)別區(qū)域輸入到第一識(shí)別模型中，得到第一輸出結(jié)果，第一輸出結(jié)果包括多個(gè)行為及每個(gè)行為對(duì)應(yīng)的權(quán)重；將大于預(yù)設(shè)權(quán)重閾值的權(quán)重所對(duì)應(yīng)的行為作為第一備選結(jié)果；若所述第一備選結(jié)果包括多個(gè)行為，從多個(gè)行為中確定識(shí)別結(jié)果；

所述若所述第一備選結(jié)果包括多個(gè)行為，從多個(gè)行為中確定識(shí)別結(jié)果的步驟包括：提取所述行人待識(shí)別區(qū)域的特征集，并將所述特征集輸入到所述第二識(shí)別模型中，得到第二輸出結(jié)果；根據(jù)所述第二輸出結(jié)果從多個(gè)行為中確定識(shí)別結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)采集的可見光圖像及紅外圖像進(jìn)行圖像處理得到待跟蹤目標(biāo)區(qū)域的步驟包括：

采集多幀可見光背景圖像以建立第一背景圖像，對(duì)當(dāng)前幀圖像及第一背景圖像進(jìn)行處理，得到第一目標(biāo)運(yùn)動(dòng)可疑區(qū)域；

采集多幀紅外背景圖像以建立第二背景圖像，對(duì)當(dāng)前紅外幀圖像及第二背景圖像進(jìn)行處理，得到第二目標(biāo)運(yùn)動(dòng)可疑區(qū)域；

通過所述第一目標(biāo)運(yùn)動(dòng)可疑區(qū)域與所述第二目標(biāo)運(yùn)動(dòng)可疑區(qū)域得到待跟蹤目標(biāo)區(qū)域。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述通過所述第一目標(biāo)運(yùn)動(dòng)可疑區(qū)域與所述第二目標(biāo)運(yùn)動(dòng)可疑區(qū)域得到待跟蹤目標(biāo)區(qū)域的步驟包括：

計(jì)算所述第一目標(biāo)運(yùn)動(dòng)可疑區(qū)域與所述第二目標(biāo)運(yùn)動(dòng)可疑區(qū)域的重疊度；

若所述重疊度小于預(yù)設(shè)重疊度，停止跟蹤判斷；

若所述重疊度大于預(yù)設(shè)重疊度，對(duì)所述第一目標(biāo)運(yùn)動(dòng)可疑區(qū)域與所述第二目標(biāo)運(yùn)動(dòng)可疑區(qū)域的重疊區(qū)域進(jìn)行處理，得到待跟蹤目標(biāo)區(qū)域。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述將所述行人待識(shí)別區(qū)域輸入到識(shí)別模型中得到行為識(shí)別結(jié)果的步驟還包括：

若所述第一備選結(jié)果只包括一個(gè)行為，則該行為作為識(shí)別結(jié)果。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述特征集包括第一特征集及第二特征集，所述提取所述行人待識(shí)別區(qū)域的特征集步驟包括：

根據(jù)所述行人待識(shí)別區(qū)域的邊緣及形心，提取所述行人待識(shí)別區(qū)域的第一特征集；

計(jì)算所述行人待識(shí)別區(qū)域的幾何矩，提取所述行人待識(shí)別區(qū)域的第二特征集。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，將所述第二輸出結(jié)果中最大權(quán)重對(duì)應(yīng)的行為作為第二備選結(jié)果，所述根據(jù)所述第二輸出結(jié)果從多個(gè)行為中確定識(shí)別結(jié)果的步驟包括：

若所述第二備選結(jié)果為所述多個(gè)行為中的其中一個(gè)行為時(shí)，將該行為作為識(shí)別結(jié)果；

若所述第二備選結(jié)果不包括所述多個(gè)行為中的任何一個(gè)行為時(shí)，重復(fù)預(yù)設(shè)次數(shù)進(jìn)行行為識(shí)別；

若重復(fù)預(yù)設(shè)次數(shù)依然無法得到行為識(shí)別結(jié)果，生成報(bào)警提示。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

根據(jù)所述識(shí)別結(jié)果執(zhí)行預(yù)設(shè)策略；

所述根據(jù)所述識(shí)別結(jié)果執(zhí)行預(yù)設(shè)策略的步驟包括：

判斷所述識(shí)別結(jié)果是否滿足預(yù)設(shè)異常行為條件；

若所述識(shí)別結(jié)果滿足預(yù)設(shè)異常行為條件，對(duì)所述識(shí)別結(jié)果對(duì)應(yīng)的行人進(jìn)行重點(diǎn)監(jiān)視，同時(shí)生成報(bào)警提示。