[發(fā)明專利]視頻中人體行為識別的方法和裝置

在審

• 申請?zhí)枺?/td>: 201610067817.X
• 申請日: 2016-01-29
• 公開（公告）號: CN107025420A
• 公開（公告）日: 2017-08-08
• 發(fā)明（設(shè)計）人: 姜育剛;張殿凱;沈琳;瞿廣財;趙瑞偉;雷晨雨
• 申請（專利權(quán)）人: 中興通訊股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 深圳市世紀(jì)恒程知識產(chǎn)權(quán)代理事務(wù)所44287
• 代理人: 胡海國

1.一種視頻中人體行為識別的方法，其特征在于，所述方法包括：

檢測待識別視頻中的人體區(qū)域，獲取所述人體區(qū)域中的人體運(yùn)行軌跡信息；

根據(jù)所述人體區(qū)域計算得到所述人體區(qū)域?qū)?yīng)的預(yù)測值，對所述預(yù)測值為非人體類別的人體區(qū)域進(jìn)行過濾，得到所述預(yù)測值為人體類別的人體區(qū)域；

對所述預(yù)測值為人體類別的人體區(qū)域進(jìn)行計算得到所述預(yù)測值為人體類別的人體區(qū)域中的目標(biāo)的行為類別得分；

根據(jù)所述行為類別得分，輸出相應(yīng)的行為類別。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述行為類別得分，輸出相應(yīng)的行為類別的步驟包括：

若所述行為類別得分高于預(yù)設(shè)行為類別的閾值，則輸出所述行為類別；

若所述行為類別得分不高于預(yù)設(shè)行為類別的閾值，則結(jié)合所述人體運(yùn)行軌跡信息，計算并輸出相應(yīng)的行為類別。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述對所述預(yù)測值為人體類別的人體區(qū)域進(jìn)行計算得到所述預(yù)測值為人體類別的人體區(qū)域中的目標(biāo)的行為類別得分的步驟包括：

獲取所述預(yù)測值為人體類別的人體區(qū)域的背景圖像，得到所述背景圖像的描述信息；

根據(jù)所述背景圖像的描述信息，計算所述背景圖像對應(yīng)的背景區(qū)域信息，并計算所述背景圖像對應(yīng)的鄰近目標(biāo)信息；

結(jié)合所述背景圖像對應(yīng)的背景區(qū)域信息和鄰近目標(biāo)信息，計算得到所述人體區(qū)域的目標(biāo)的行為類別得分。

4.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述結(jié)合所述人體運(yùn)行軌跡信息，計算并輸出相應(yīng)的行為類別的步驟包括：

獲取所述待識別視頻的當(dāng)前時刻圖像和所述人體運(yùn)行軌跡信息對應(yīng)的跟蹤區(qū)域圖像；

將所述當(dāng)前時刻圖像和所述跟蹤區(qū)域圖像進(jìn)行順序疊加；

對所述行為類別得分和所述進(jìn)行順序疊加后的結(jié)果進(jìn)行加權(quán)求和，輸出對應(yīng)的行為類別。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述人體區(qū)域計算得到所述人體區(qū)域?qū)?yīng)的預(yù)測值，對所述預(yù)測值為非人體類別的人體區(qū)域進(jìn)行過濾的步驟包括：

獲取所述人體區(qū)域并進(jìn)行分析，輸出所述人體區(qū)域?qū)?yīng)的預(yù)測值；

若所述預(yù)測值為非人體類別，則將所述預(yù)測值為非人體類別的人體區(qū)域從所述獲取的人體區(qū)域中進(jìn)行過濾；

若所述預(yù)測值為人體類別，則執(zhí)行計算所述預(yù)測值為人體類別的人體區(qū)域中的目標(biāo)的行為類別得分的步驟。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述檢測待識別視頻中的人體區(qū)域，獲取所述人體區(qū)域中的人體運(yùn)行軌跡信息的步驟包括：

獲取所述待識別視頻，對所述待識別視頻中的人體區(qū)域進(jìn)行檢測；

對所述人體區(qū)域中的行人進(jìn)行跟蹤，得到所述人體區(qū)域中的人體運(yùn)行軌跡信息。

7.一種視頻中人體行為識別的裝置，其特征在于，所述裝置包括：

檢測模塊，用于檢測待識別視頻中的人體區(qū)域，獲取所述人體區(qū)域中的人體運(yùn)行軌跡信息；

過濾模塊，用于根據(jù)所述人體區(qū)域計算得到所述人體區(qū)域?qū)?yīng)的預(yù)測值，對所述預(yù)測值為非人體類別的人體區(qū)域進(jìn)行過濾，得到所述預(yù)測值為人體類別的人體區(qū)域；

計算模塊，用于對所述預(yù)測值為人體類別的人體區(qū)域進(jìn)行計算得到所述預(yù)測值為人體類別的人體區(qū)域中的目標(biāo)的行為類別得分；

輸出模塊，用于根據(jù)所述行為類別得分，輸出相應(yīng)的行為類別。

8.根據(jù)權(quán)利要求7所述的裝置，其特征在于，

所述輸出模塊，還用于若所述行為類別得分高于預(yù)設(shè)行為類別的閾值，則輸出所述行為類別；若所述行為類別得分不高于預(yù)設(shè)行為類別的閾值，則結(jié)合所述人體運(yùn)行軌跡信息，計算并輸出相應(yīng)的行為類別。

9.根據(jù)權(quán)利要求8所述的裝置，其特征在于，

所述計算模塊，還用于獲取所述預(yù)測值為人體類別的人體區(qū)域的背景圖像，得到所述背景圖像的描述信息；根據(jù)所述背景圖像的描述信息，計算所述背景圖像對應(yīng)的背景區(qū)域信息，并計算所述背景圖像對應(yīng)的鄰近目標(biāo)信息；結(jié)合所述背景圖像對應(yīng)的背景區(qū)域信息和鄰近目標(biāo)信息，計算得到所述人體區(qū)域的目標(biāo)的行為類別得分。