[發(fā)明專(zhuān)利]圖像檢測(cè)方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110252444.4
• 申請(qǐng)日: 2021-03-09
• 公開(kāi)（公告）號(hào): CN112633261A
• 公開(kāi)（公告）日: 2021-04-09
• 發(fā)明（設(shè)計(jì)）人: 賈文浩;高原;劉霄
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京世紀(jì)好未來(lái)教育科技有限公司
• 主分類(lèi)號(hào): G06K9/00
• 分類(lèi)號(hào): G06K9/00;G06K9/46;G06K9/62;G06N3/04
• 代理公司: 北京市鑄成律師事務(wù)所 11313
• 代理人: 鄧海鴻;楊瑾瑾

1.一種圖像檢測(cè)方法，其特征在于，包括：

檢測(cè)待處理圖像序列，得到關(guān)鍵點(diǎn)特征；

提取所述待處理圖像序列的光流特征；

根據(jù)所述關(guān)鍵點(diǎn)特征和所述光流特征，得到所述待處理圖像序列的動(dòng)作檢測(cè)結(jié)果。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，檢測(cè)待處理圖像序列，得到關(guān)鍵點(diǎn)特征，包括：

檢測(cè)待處理圖像序列，得到關(guān)鍵點(diǎn)序列和關(guān)鍵點(diǎn)鄰接矩陣；

利用卷積網(wǎng)絡(luò)模型對(duì)所述關(guān)鍵點(diǎn)序列和所述關(guān)鍵點(diǎn)鄰接矩陣進(jìn)行處理，得到所述關(guān)鍵點(diǎn)特征。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，檢測(cè)待處理圖像序列，得到關(guān)鍵點(diǎn)序列和關(guān)鍵點(diǎn)鄰接矩陣，包括：

檢測(cè)所述待處理圖像序列中人體的位置，得到人體位置檢測(cè)框；

在所述人體位置檢測(cè)框中檢測(cè)人體的關(guān)鍵點(diǎn)，得到所述關(guān)鍵點(diǎn)序列；

根據(jù)所述關(guān)鍵點(diǎn)序列構(gòu)建所述關(guān)鍵點(diǎn)鄰接矩陣。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，在所述人體位置檢測(cè)框中檢測(cè)人體的關(guān)鍵點(diǎn)，得到所述關(guān)鍵點(diǎn)序列，包括：

在所述人體位置檢測(cè)框中檢測(cè)人體的關(guān)鍵點(diǎn)，得到關(guān)鍵點(diǎn)坐標(biāo)；

對(duì)所述關(guān)鍵點(diǎn)坐標(biāo)進(jìn)行第一歸一化操作，得到所述關(guān)鍵點(diǎn)序列。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，對(duì)所述關(guān)鍵點(diǎn)坐標(biāo)進(jìn)行第一歸一化操作，得到所述關(guān)鍵點(diǎn)序列，包括：

根據(jù)所述人體位置檢測(cè)框?qū)λ鲫P(guān)鍵點(diǎn)坐標(biāo)進(jìn)行第一歸一化操作。

6.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述關(guān)鍵點(diǎn)鄰接矩陣中包括任意兩個(gè)關(guān)鍵點(diǎn)之間的連接權(quán)重，所述連接權(quán)重用于表征所述卷積網(wǎng)絡(luò)模型對(duì)所述任意兩個(gè)關(guān)鍵點(diǎn)相關(guān)的動(dòng)作的關(guān)注程度。

7.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述卷積網(wǎng)絡(luò)模型包括空間時(shí)間圖卷積網(wǎng)絡(luò)模型。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述空間時(shí)間圖卷積網(wǎng)絡(luò)模型中包括空間注意力模塊、時(shí)序注意力模塊和通道注意力模塊中的至少一種。

9.根據(jù)權(quán)利要求1所述的方法，其特征在于，提取所述待處理圖像序列的光流特征，包括：

提取所述待處理圖像序列的稠密光流信息，得到光流圖像序列；

利用神經(jīng)網(wǎng)絡(luò)模型對(duì)所述光流圖像序列進(jìn)行處理，得到所述待處理圖像序列的光流特征。

10.根據(jù)權(quán)利要求1至9中任一項(xiàng)所述的方法，其特征在于，根據(jù)所述關(guān)鍵點(diǎn)特征和所述光流特征，得到所述待處理圖像序列的動(dòng)作檢測(cè)結(jié)果，包括：

根據(jù)所述關(guān)鍵點(diǎn)特征和所述光流特征，得到至少兩個(gè)檢測(cè)結(jié)果；

將所述至少兩個(gè)檢測(cè)結(jié)果進(jìn)行融合，得到所述待處理圖像序列的動(dòng)作檢測(cè)結(jié)果。

11.根據(jù)權(quán)利要求10所述的方法，其特征在于，根據(jù)所述關(guān)鍵點(diǎn)特征和所述光流特征，得到至少兩個(gè)檢測(cè)結(jié)果，包括：

根據(jù)所述關(guān)鍵點(diǎn)特征得到所述待處理圖像序列的第一檢測(cè)結(jié)果；

根據(jù)所述光流特征得到所述待處理圖像序列的第二檢測(cè)結(jié)果。

12.根據(jù)權(quán)利要求11所述的方法，其特征在于，根據(jù)所述關(guān)鍵點(diǎn)特征和所述光流特征，得到至少兩個(gè)檢測(cè)結(jié)果，還包括：

根據(jù)所述關(guān)鍵點(diǎn)特征和所述光流特征得到融合特征，根據(jù)所述融合特征得到所述待處理圖像序列的第三檢測(cè)結(jié)果。

13.根據(jù)權(quán)利要求12所述的方法，其特征在于，根據(jù)所述關(guān)鍵點(diǎn)特征和所述光流特征得到融合特征，包括：

對(duì)所述關(guān)鍵點(diǎn)特征依次進(jìn)行第一卷積操作和上采樣操作；

對(duì)所述光流特征進(jìn)行第二卷積操作；

將上采樣操作之后的關(guān)鍵點(diǎn)特征和第二卷積操作之后的光流特征進(jìn)行第一拼接操作，得到拼接特征；

將所述拼接特征進(jìn)行第三卷積操作，得到融合特征。