[發(fā)明專利]基于圖像檢測的動作識別數(shù)據(jù)集生成方法及裝置

在審

• 申請?zhí)枺?/td>: 202110187621.5
• 申請日: 2021-02-18
• 公開（公告）號: CN112784813A
• 公開（公告）日: 2021-05-11
• 發(fā)明（設(shè)計）人: 周力;安雪暉;劉祖光;李鵬飛;李志偉
• 申請（專利權(quán)）人: 清華大學(xué);重慶交通大學(xué)
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06N20/00
• 代理公司: 北京三友知識產(chǎn)權(quán)代理有限公司 11127
• 代理人: 單曉雙;葉明川

1.一種基于圖像檢測的動作識別數(shù)據(jù)集生成方法，其特征在于，包括：

確定預(yù)先采集的動作視頻中每一幀中所有待檢測目標(biāo)的檢測矩形；

在所述每一幀中的每一待檢測目標(biāo)的檢測矩形中進(jìn)行標(biāo)記；

按照第一預(yù)設(shè)范圍對所述每一幀進(jìn)行裁剪；

組裝裁剪后的多幀，以生成動作視頻數(shù)據(jù)或圖像序列。

2.如權(quán)利要求1所述的基于圖像檢測的動作識別數(shù)據(jù)集生成方法，其特征在于，所述確定預(yù)先采集的動作視頻中每一幀中所有待檢測目標(biāo)的檢測矩形，包括：

利用CV算法，確定所述每一幀的檢測矩形的初步形心位置；

根據(jù)所述初步形心位置確定當(dāng)前幀的檢測矩形的最終形心位置；

根據(jù)第二預(yù)設(shè)范圍以及所述最終形心位置確定所述當(dāng)前幀的檢測矩形。

3.如權(quán)利要求2所述的基于圖像檢測的動作識別數(shù)據(jù)集生成方法，其特征在于，所述根據(jù)所述初步形心位置確定當(dāng)前幀的檢測矩形的最終形心位置，包括：

在時間域上，根據(jù)當(dāng)前幀的檢測矩形的初步形心位置以及當(dāng)前幀附近多個幀的檢測矩形的初步形心位置，確定所述當(dāng)前幀的檢測矩形的最終形心位置。

4.如權(quán)利要求1所述的基于圖像檢測的動作識別數(shù)據(jù)集生成方法，其特征在于，還包括：

在所述動作視頻中對所有待檢測目標(biāo)的進(jìn)行動作識別標(biāo)注；

根據(jù)組裝所得的視頻/圖像序列，以及對應(yīng)的標(biāo)注數(shù)據(jù)生成動作識別數(shù)據(jù)集；

所述在所述動作視頻中對所有待檢測目標(biāo)的進(jìn)行動作識別標(biāo)注包括：

根據(jù)裁剪的計算規(guī)則及裁剪時裁剪規(guī)則所使用的參數(shù)生成標(biāo)注信息；

根據(jù)所述標(biāo)注信息進(jìn)行動作識別標(biāo)注。

5.一種基于圖像檢測的動作識別數(shù)據(jù)集生成裝置，其特征在于，包括：

檢測矩形確定單元，用于確定預(yù)先采集的動作視頻中每一幀中所有待檢測目標(biāo)的檢測矩形；

幀標(biāo)記單元，用于在所述每一幀中的每一待檢測目標(biāo)的檢測矩形中進(jìn)行標(biāo)記；

幀裁剪單元，用于按照第一預(yù)設(shè)范圍對所述每一幀進(jìn)行裁剪；

視頻生成單元，用于組裝裁剪后的多幀，以生成動作視頻數(shù)據(jù)或圖像序列。

6.如權(quán)利要求5所述的基于圖像檢測的動作識別數(shù)據(jù)集生成裝置，其特征在于，所述檢測矩形確定單元包括：

初步位置確定模塊，用于利用CV算法，確定所述每一幀的檢測矩形的初步形心位置；

最終位置確定模塊，用于根據(jù)所述初步形心位置確定當(dāng)前幀的檢測矩形的最終形心位置；

檢測矩形確定模塊，用于根據(jù)第二預(yù)設(shè)范圍以及所述最終形心位置確定所述當(dāng)前幀的檢測矩形。

7.如權(quán)利要求6所述的基于圖像檢測的動作識別數(shù)據(jù)集生成裝置，其特征在于，所述最終位置確定模塊具體用于在時間域上，根據(jù)當(dāng)前幀的檢測矩形的初步形心位置以及當(dāng)前幀附近多個幀的檢測矩形的初步形心位置，確定所述當(dāng)前幀的檢測矩形的最終形心位置。

8.如權(quán)利要求5所述的基于圖像檢測的動作識別數(shù)據(jù)集生成裝置，其特征在于，還包括：

動作標(biāo)注單元，用于在所述動作視頻中對所有待檢測目標(biāo)的進(jìn)行動作識別標(biāo)注；

數(shù)據(jù)集生成單元，用于根據(jù)組裝所得的視頻/圖像序列，以及對應(yīng)的標(biāo)注數(shù)據(jù)生成動作識別數(shù)據(jù)集；

所述動作標(biāo)注單元包括：

標(biāo)注信息生成模塊，用于根據(jù)裁剪的計算規(guī)則及裁剪時裁剪規(guī)則所使用的參數(shù)生成標(biāo)注信息；

動作標(biāo)注模塊，用于根據(jù)所述標(biāo)注信息進(jìn)行動作識別標(biāo)注。

9.一種電子設(shè)備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機(jī)程序，其特征在于，所述處理器執(zhí)行所述程序時實現(xiàn)權(quán)利要求1至4任一項所述基于圖像檢測的動作識別數(shù)據(jù)集生成方法的步驟。

10.一種計算機(jī)可讀存儲介質(zhì)，其上存儲有計算機(jī)程序，其特征在于，所述計算機(jī)程序被處理器執(zhí)行時實現(xiàn)權(quán)利要求1至4任一項所述基于圖像檢測的動作識別數(shù)據(jù)集生成方法的步驟。