[發(fā)明專(zhuān)利]動(dòng)作追蹤處理方法和裝置、介質(zhì)及設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 201910242045.2
• 申請(qǐng)日: 2019-03-28
• 公開(kāi)（公告）號(hào): CN111753585A
• 公開(kāi)（公告）日: 2020-10-09
• 發(fā)明（設(shè)計(jì)）人: 陳光啟;陳彥杰;王飛;錢(qián)晨
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京市商湯科技開(kāi)發(fā)有限公司
• 主分類(lèi)號(hào): G06K9/00
• 分類(lèi)號(hào): G06K9/00;G06K9/62
• 代理公司: 北京思源智匯知識(shí)產(chǎn)權(quán)代理有限公司 11657
• 代理人: 毛麗琴

1.一種動(dòng)作追蹤處理方法，其特征在于，包括：

獲取視頻幀序列中的當(dāng)前視頻幀的動(dòng)作圖像塊；

對(duì)所述當(dāng)前視頻幀的動(dòng)作圖像塊進(jìn)行動(dòng)作狀態(tài)檢測(cè)處理，獲得所述當(dāng)前視頻幀的動(dòng)作狀態(tài)信息；其中，所述動(dòng)作狀態(tài)信息用于判斷動(dòng)作圖像塊中的動(dòng)作類(lèi)別；

在根據(jù)所述動(dòng)作狀態(tài)信息確定所述當(dāng)前視頻幀的動(dòng)作圖像塊中的動(dòng)作屬于預(yù)定動(dòng)作的情況下，將所述視頻幀序列中的下一視頻幀作為當(dāng)前視頻幀，以再次執(zhí)行所述動(dòng)作追蹤處理的操作。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

在根據(jù)所述動(dòng)作狀態(tài)信息確定所述當(dāng)前視頻幀的動(dòng)作圖像塊中的動(dòng)作不屬于預(yù)定動(dòng)作的情況下，所述視頻幀序列中的下一視頻幀不被作為當(dāng)前視頻幀，以停止執(zhí)行所述動(dòng)作追蹤處理的操作。

3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述獲取視頻幀序列中的當(dāng)前視頻幀的動(dòng)作圖像塊包括：

對(duì)所述視頻幀序列中的當(dāng)前視頻幀進(jìn)行目標(biāo)檢測(cè)，獲得檢測(cè)框；

根據(jù)所述檢測(cè)框?qū)Ξ?dāng)前視頻幀進(jìn)行切分處理，獲得當(dāng)前視頻幀的動(dòng)作圖像塊。

4.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述獲取視頻幀序列中的當(dāng)前視頻幀的動(dòng)作圖像塊包括：

在所述視頻幀序列中的當(dāng)前視頻幀的上一視頻幀中的動(dòng)作圖像塊中的動(dòng)作屬于預(yù)定動(dòng)作的情況下，根據(jù)所述視頻幀序列中的當(dāng)前視頻幀的上一視頻幀的動(dòng)作圖像塊的位置信息，確定當(dāng)前視頻幀的動(dòng)作圖像塊的位置信息；

根據(jù)所述當(dāng)前視頻幀的動(dòng)作圖像塊的位置信息，對(duì)所述當(dāng)前視頻幀進(jìn)行切分，獲得所述當(dāng)前視頻幀的動(dòng)作圖像塊。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)所述視頻幀序列中的當(dāng)前視頻幀的上一視頻幀的動(dòng)作圖像塊的位置信息，確定當(dāng)前視頻幀的動(dòng)作圖像塊的位置信息，包括：

根據(jù)預(yù)定擴(kuò)展比例，對(duì)所述視頻幀序列中的當(dāng)前視頻幀的上一視頻幀的動(dòng)作圖像塊的位置信息所形成的動(dòng)作邊界框，進(jìn)行擴(kuò)展處理，以獲得所述當(dāng)前視頻幀的動(dòng)作圖像塊的位置信息。

6.根據(jù)權(quán)利要求1至5中任一項(xiàng)所述的方法，其特征在于，在對(duì)所述當(dāng)前視頻幀的動(dòng)作圖像塊進(jìn)行動(dòng)作狀態(tài)檢測(cè)處理，獲得所述當(dāng)前視頻幀的動(dòng)作狀態(tài)信息的步驟由神經(jīng)網(wǎng)絡(luò)執(zhí)行的情況下，所述方法包括：

經(jīng)所述神經(jīng)網(wǎng)絡(luò)，對(duì)所述當(dāng)前視頻幀的動(dòng)作圖像塊進(jìn)行動(dòng)作狀態(tài)檢測(cè)處理，根據(jù)所述神經(jīng)網(wǎng)絡(luò)的第一分支的輸出，獲得所述當(dāng)前視頻幀的動(dòng)作圖像塊的位置信息，根據(jù)所述神經(jīng)網(wǎng)絡(luò)的第二分支的輸出，獲得所述當(dāng)前視頻幀的動(dòng)作狀態(tài)信息。

7.一種動(dòng)作追蹤處理裝置，其特征在于，包括：

第一獲取模塊，用于獲取視頻幀序列中的當(dāng)前視頻幀的動(dòng)作圖像塊；

第二獲取模塊，用于對(duì)所述當(dāng)前視頻幀的動(dòng)作圖像塊進(jìn)行動(dòng)作狀態(tài)檢測(cè)處理，獲得所述當(dāng)前視頻幀的動(dòng)作狀態(tài)信息；其中，所述動(dòng)作狀態(tài)信息用于判斷動(dòng)作圖像塊中的動(dòng)作類(lèi)別；

追蹤控制模塊，用于在根據(jù)所述動(dòng)作狀態(tài)信息確定所述當(dāng)前視頻幀的動(dòng)作圖像塊中的動(dòng)作屬于預(yù)定動(dòng)作的情況下，將所述視頻幀序列中的下一視頻幀作為當(dāng)前視頻幀，以控制所述裝置再次執(zhí)行所述動(dòng)作追蹤處理的操作。

8.一種電子設(shè)備，包括：

存儲(chǔ)器，用于存儲(chǔ)計(jì)算機(jī)程序；

處理器，用于執(zhí)行所述存儲(chǔ)器中存儲(chǔ)的計(jì)算機(jī)程序，且所述計(jì)算機(jī)程序被執(zhí)行時(shí)，實(shí)現(xiàn)上述權(quán)利要求1-6中任一項(xiàng)所述的方法。

9.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)，實(shí)現(xiàn)上述權(quán)利要求1-6中任一項(xiàng)所述的方法。

10.一種計(jì)算機(jī)程序，包括計(jì)算機(jī)指令，當(dāng)所述計(jì)算機(jī)指令在設(shè)備的處理器中運(yùn)行時(shí)，實(shí)現(xiàn)上述權(quán)利要求1-6中任一項(xiàng)所述的方法。