[發(fā)明專(zhuān)利]起立行為目標(biāo)檢測(cè)方法、裝置、終端設(shè)備和存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202111022912.5
• 申請(qǐng)日: 2021-09-01
• 公開(kāi)（公告）號(hào): CN115761784A
• 公開(kāi)（公告）日: 2023-03-07
• 發(fā)明（設(shè)計(jì)）人: 張玉兵
• 申請(qǐng)（專(zhuān)利權(quán)）人: 廣州視源電子科技股份有限公司
• 主分類(lèi)號(hào): G06V40/10
• 分類(lèi)號(hào): G06V40/10;G06V20/40;G06V10/46
• 代理公司: 北京澤方譽(yù)航專(zhuān)利代理事務(wù)所(普通合伙) 11884
• 代理人: 唐明磊

1.一種起立行為目標(biāo)檢測(cè)方法，其特征在于，包括：

對(duì)采集到的視頻流逐幀進(jìn)行目標(biāo)檢測(cè)和光流計(jì)算，對(duì)應(yīng)分別得到視頻幀中的起立目標(biāo)和光流；

跟蹤相鄰幀中的所述起立目標(biāo)，確認(rèn)各個(gè)起立目標(biāo)對(duì)應(yīng)的初始區(qū)域，提取每個(gè)初始區(qū)域的四肢區(qū)域；

統(tǒng)計(jì)所述初始區(qū)域的光流數(shù)目，確認(rèn)初始區(qū)域中的目標(biāo)區(qū)域，所述目標(biāo)區(qū)域?yàn)楣饬鲾?shù)目達(dá)到第一門(mén)限值的初始區(qū)域；

確認(rèn)所述目標(biāo)區(qū)域的數(shù)量小于預(yù)設(shè)的區(qū)域門(mén)限值時(shí)，濾除所述目標(biāo)區(qū)域中對(duì)應(yīng)的四肢區(qū)域的光流，確認(rèn)起立區(qū)域，所述起立區(qū)域?yàn)槭Ｓ嗟墓饬鬟_(dá)到第二門(mén)限值的目標(biāo)區(qū)域。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，用于所述目標(biāo)檢測(cè)的目標(biāo)檢測(cè)模型包括依次連接的Backbone模塊、FPN模塊、PAN模塊和FCOS檢測(cè)頭；

所述視頻流的圖像幀輸入所述Backbone模塊；所述Backbone模塊包括三個(gè)堆疊設(shè)置的MCSP模塊，所述FCOS檢測(cè)頭的損失函數(shù)為GFocalloss和GIoUloss；所述FCOS檢測(cè)頭輸出所述圖像幀中的起立目標(biāo)和坐姿目標(biāo)。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述統(tǒng)計(jì)所述初始區(qū)域的光流數(shù)目，確認(rèn)初始區(qū)域中的目標(biāo)區(qū)域，所述目標(biāo)區(qū)域?yàn)楣饬鲾?shù)目達(dá)到第一門(mén)限值的初始區(qū)域，包括：

統(tǒng)計(jì)所述視頻流中的多個(gè)圖像幀，獲取相鄰兩個(gè)圖像幀中對(duì)應(yīng)的初始區(qū)域的光流數(shù)目，所述多個(gè)圖像幀為當(dāng)前圖像幀及之前的預(yù)設(shè)數(shù)量的圖像幀；

將所述多個(gè)圖像幀中，對(duì)應(yīng)于同一初始區(qū)域最大的光流數(shù)目作為該初始區(qū)域在當(dāng)前圖像幀的光流數(shù)目；

確認(rèn)所述當(dāng)前圖像幀中光流數(shù)目達(dá)到第一門(mén)限值的初始區(qū)域?yàn)槟繕?biāo)區(qū)域。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述提取每個(gè)初始區(qū)域的四肢區(qū)域，包括：

通過(guò)單人關(guān)鍵點(diǎn)估計(jì)模型，提取各個(gè)初始區(qū)域中的四肢關(guān)鍵點(diǎn)；

根據(jù)所述四肢關(guān)鍵點(diǎn)對(duì)應(yīng)的坐標(biāo)，確認(rèn)對(duì)應(yīng)的四肢區(qū)域。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述根據(jù)所述四肢關(guān)鍵點(diǎn)對(duì)應(yīng)的坐標(biāo)，確認(rèn)對(duì)應(yīng)的四肢區(qū)域，包括：

獲取所述四肢關(guān)鍵點(diǎn)中相鄰兩個(gè)關(guān)鍵點(diǎn)的坐標(biāo)；

根據(jù)所述相鄰兩個(gè)關(guān)鍵點(diǎn)的坐標(biāo)確認(rèn)矩形區(qū)域；

將所有矩形區(qū)域的覆蓋區(qū)域作為對(duì)應(yīng)的四肢區(qū)域。

6.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述根據(jù)所述相鄰兩個(gè)關(guān)鍵點(diǎn)的坐標(biāo)確認(rèn)矩形區(qū)域，包括：

計(jì)算所述相鄰兩個(gè)關(guān)鍵點(diǎn)的連線與水平方向的夾角其中，

當(dāng)x₁-x₂＞0，通過(guò)如下公式計(jì)算所述矩形區(qū)域的四個(gè)頂點(diǎn)坐標(biāo)：

當(dāng)x₁-x₂＜0，通過(guò)如下公式計(jì)算所述矩形區(qū)域的四個(gè)頂點(diǎn)坐標(biāo)：

其中，(x₁,y₁)為所述相鄰兩個(gè)關(guān)鍵點(diǎn)中縱坐標(biāo)較大的點(diǎn)的坐標(biāo)，(x₂,y₂)為所述相鄰兩個(gè)關(guān)鍵點(diǎn)中縱坐標(biāo)較小的點(diǎn)的坐標(biāo)，P₁、P₂、P₃和P₄表示所述矩形區(qū)域的四個(gè)頂點(diǎn)，l為所述相鄰兩個(gè)關(guān)鍵點(diǎn)的距離。

7.根據(jù)權(quán)利要求5所述的方法，其特征在于，所述根據(jù)所述相鄰兩個(gè)關(guān)鍵點(diǎn)的坐標(biāo)確認(rèn)矩形區(qū)域，包括：

根據(jù)所述相鄰兩個(gè)關(guān)鍵點(diǎn)的坐標(biāo)確認(rèn)對(duì)應(yīng)的中心點(diǎn)坐標(biāo)、矩形區(qū)域的左上角頂點(diǎn)坐標(biāo)、矩形區(qū)域的初始高度值和初始寬度值；

根據(jù)所述初始高度值和初始寬度值的比例關(guān)系，基于所述中心點(diǎn)坐標(biāo)、初始高度值和初始寬度值，對(duì)所述矩形的左上角頂點(diǎn)坐標(biāo)、初始高度值和初始寬度值進(jìn)行修正，以確認(rèn)所述矩形區(qū)域。