[發(fā)明專利]行為識別方法及裝置、設(shè)備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110449968.2
• 申請日: 2021-04-25
• 公開（公告）號: CN113111839A
• 公開（公告）日: 2021-07-13
• 發(fā)明（設(shè)計）人: 蘇海昇;蘇婧;王棟梁
• 申請（專利權(quán)）人: 上海商湯智能科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/32;G06K9/62;G06N20/00
• 代理公司: 北京派特恩知識產(chǎn)權(quán)代理有限公司 11270
• 代理人: 劉鶴;張穎玲

1.一種行為識別方法，其特征在于，所述方法包括：

獲取待識別視頻序列中每一幀圖像中每一對象的檢測結(jié)果；

根據(jù)每一所述對象的檢測結(jié)果，生成至少一個第一序列；其中，每一所述第一序列為包括同一對象的軌跡序列；

對每一所述第一序列進(jìn)行行為識別，得到每一所述對象的行為識別結(jié)果。

2.如權(quán)利要求1所述的方法，其特征在于，所述待識別視頻序列是通過以下過程得到的：

按照特定時間間隔，從視頻源中選取至少兩幀圖像；

將所述至少兩幀圖像存入幀序列緩沖區(qū)；其中，所述幀序列緩沖區(qū)的長度固定；

獲取所述幀序列緩沖區(qū)中的幀圖像作為所述待識別視頻序列。

3.如權(quán)利要求1或2所述的方法，其特征在于，所述對象的檢測結(jié)果至少包括所述對象的檢測框和與所述檢測框關(guān)聯(lián)的對象標(biāo)識；

所述根據(jù)每一所述對象的檢測結(jié)果，生成至少一個第一序列，包括：

從每一所述對象的檢測框中，選擇在空間位置上獨立的檢測框作為候選檢測框；

根據(jù)所述候選檢測框和與所述候選檢測框關(guān)聯(lián)的對象標(biāo)識，生成所述至少一個第一序列。

4.如權(quán)利要求3所述的方法，其特征在于，所述每一幀圖像中包括一個檢測框，所述從每一所述對象的檢測框中，選擇在空間位置上獨立的檢測框作為候選檢測框，包括：

將所述每一幀圖像中的一個檢測框作為所述候選檢測框。

5.如權(quán)利要求3所述的方法，其特征在于，所述每一幀圖像中包括至少兩個檢測框，所述從每一所述對象的檢測框中，選擇在空間位置上獨立的檢測框作為候選檢測框，包括：

確定所述每一幀圖像中的至少兩個檢測框之間的交并比；

根據(jù)所述交并比，生成所述每一幀圖像對應(yīng)的鄰接矩陣；

將所述鄰接矩陣中匹配次數(shù)為零的檢測框作為所述候選檢測框。

6.如權(quán)利要求3至5任一項所述的方法，其特征在于，所述根據(jù)所述候選檢測框和與所述候選檢測框關(guān)聯(lián)的對象標(biāo)識，生成所述至少一個第一序列，包括：

對與每一所述對象標(biāo)識關(guān)聯(lián)的候選檢測框在空間位置上取并集，得到與每一所述對象標(biāo)識對應(yīng)的最小包圍框；

根據(jù)所述最小包圍框，截取所述每一幀圖像中與所述最小包圍框?qū)?yīng)的區(qū)域圖像；

按照所述每一幀圖像的時間戳，依次連接所述區(qū)域圖像，得到與每一所述對象標(biāo)識對應(yīng)的第一序列。

7.如權(quán)利要求5所述的方法，其特征在于，所述方法還包括：

對每一所述對象的檢測框，向外擴(kuò)展特定比例，得到擴(kuò)展后的檢測框；

從所述擴(kuò)展后的檢測框中篩選至少兩個第一檢測框；其中，所述第一檢測框的面積大于所述擴(kuò)展后的檢測框中的其他檢測框；

所述確定所述每一幀圖像中的至少兩個檢測框之間的交并比，包括：

確定所述至少兩個第一檢測框之間的交并比。

8.如權(quán)利要求7所述的方法，其特征在于，所述候選檢測框為從所述至少兩個第一檢測框中選擇的，所述根據(jù)所述候選檢測框和與所述候選檢測框關(guān)聯(lián)的對象標(biāo)識，生成所述至少一個第一序列，包括：

對所述候選檢測框，按照所述特定比例進(jìn)行內(nèi)縮，得到原始尺寸的候選檢測框；

根據(jù)所述原始尺寸的候選檢測框和與所述候選檢測框關(guān)聯(lián)的對象標(biāo)識，生成所述至少一個第一序列。

9.如權(quán)利要求6所述的方法，其特征在于，所述方法還包括：

確定所述區(qū)域圖像中除去所述候選檢測框之外的噪聲區(qū)域；

利用純色背景填充所述噪聲區(qū)域，得到目標(biāo)區(qū)域圖像；

相應(yīng)地，按照所述每一幀圖像的時間戳，依次連接所述目標(biāo)區(qū)域圖像，得到與每一所述對象標(biāo)識對應(yīng)的第一序列。