[發(fā)明專利]違規(guī)丟棄垃圾行為檢測(cè)方法、裝置及應(yīng)用

有效

• 申請(qǐng)?zhí)枺?/td>: 202110985424.8
• 申請(qǐng)日: 2021-08-26
• 公開（公告）號(hào): CN113435419B
• 公開（公告）日: 2021-11-12
• 發(fā)明（設(shè)計(jì)）人: 徐劍炯;陳思瑤;毛云青;王國(guó)梁
• 申請(qǐng)（專利權(quán)）人: 城云科技（中國(guó)）有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00
• 代理公司: 無(wú)錫市匯誠(chéng)永信專利代理事務(wù)所(普通合伙) 32260
• 代理人: 倪楊

1.一種違規(guī)丟棄垃圾行為檢測(cè)方法，其特征在于，包括：

獲取連續(xù)多幀監(jiān)控視頻圖像；

獲取同時(shí)存在至少一垃圾檢測(cè)框和至少一人體檢測(cè)框的所述監(jiān)控視頻圖像得到第一待檢測(cè)圖像集合；

提取所述連續(xù)多幀監(jiān)控視頻圖像的視頻特征圖，所述第一待檢測(cè)圖像的所述垃圾檢測(cè)框映射于所述視頻特征圖得到對(duì)應(yīng)的垃圾特征圖，所述第一待檢測(cè)圖像的所述人體檢測(cè)框映射于所述視頻特征圖得到對(duì)應(yīng)的人體特征圖；

將所述垃圾特征圖輸入第一垃圾特征圖卷積層中進(jìn)行卷積得到第一垃圾特征圖，將所述人體特征圖輸入第一人體特征圖卷積層中進(jìn)行卷積得到第一人體特征圖，將所述人體特征圖輸入第二人體特征圖卷積層中進(jìn)行卷積得到第二人體特征圖，將所述第一垃圾特征圖和所述第一人體特征圖輸入第一Scale層相乘得第一特征，將所述第一特征經(jīng)過(guò)激活函數(shù)操作后得到交互特征值，將所述交互特征值和所述第二人體特征圖共同輸入第二Scale層相乘得到第二特征，將所述第二特征輸入全連接層后得到所述交互特征；

對(duì)所述交互特征進(jìn)行分類獲得分類結(jié)果，基于所述分類結(jié)果確定違規(guī)丟棄垃圾行為。

2.根據(jù)權(quán)利要求1所述的違規(guī)丟棄垃圾行為檢測(cè)方法，其特征在于，所述交互特征表征每一所述人體特征圖和每一所述垃圾特征圖的交互性。

3.根據(jù)權(quán)利要求1所述的違規(guī)丟棄垃圾行為檢測(cè)方法，其特征在于，獲取所述第一待檢測(cè)圖像集合中的每一所述第一待檢測(cè)圖像的交互特征，遍歷所述交互特征的分類結(jié)果。

4.根據(jù)權(quán)利要求1所述的違規(guī)丟棄垃圾行為檢測(cè)方法，其特征在于，若存在所述違規(guī)丟棄垃圾行為，獲取所述交互特征對(duì)應(yīng)的所述人體檢測(cè)框確定行為人。

5.一種違規(guī)丟棄垃圾行為檢測(cè)裝置，其特征在于，包括：

監(jiān)控視頻圖像獲取單元，用于獲取連續(xù)多幀監(jiān)控視頻圖像；

第一待檢測(cè)圖像獲取單元，用于獲取同時(shí)存在至少一垃圾檢測(cè)框和至少一人體檢測(cè)框的所述監(jiān)控視頻圖像得到第一待檢測(cè)圖像集合；

特征圖獲取單元，用于提取所述連續(xù)多幀監(jiān)控視頻圖像的視頻特征圖，所述第一待檢測(cè)圖像的所述垃圾檢測(cè)框映射于所述視頻特征圖得到對(duì)應(yīng)的垃圾特征圖，所述第一待檢測(cè)圖像的所述人體檢測(cè)框映射于所述視頻特征圖得到對(duì)應(yīng)的人體特征圖；

交互特征獲取單元，用于將所述垃圾特征圖輸入第一垃圾特征圖卷積層中進(jìn)行卷積得到第一垃圾特征圖，將所述人體特征圖輸入第一人體特征圖卷積層中進(jìn)行卷積得到第一人體特征圖，將所述人體特征圖輸入第二人體特征圖卷積層中進(jìn)行卷積得到第二人體特征圖，將所述第一垃圾特征圖和所述第一人體特征圖輸入第一Scale層相乘得第一特征，將所述第一特征經(jīng)過(guò)激活函數(shù)操作后得到交互特征值，將所述交互特征值和所述第二人體特征圖共同輸入第二Scale層相乘得到第二特征，將所述第二特征輸入全連接層后得到所述交互特征；

行為判斷單元，用于對(duì)所述交互特征進(jìn)行分類獲得分類結(jié)果，基于所述分類結(jié)果確定違規(guī)丟棄垃圾行為。

6.一種電子裝置，包括存儲(chǔ)器和處理器，其特征在于，所述存儲(chǔ)器中存儲(chǔ)有計(jì)算機(jī)程序，所述處理器被設(shè)置為運(yùn)行所述計(jì)算機(jī)程序以執(zhí)行權(quán)利要求1到4任一所述的違規(guī)丟棄垃圾行為檢測(cè)方法。

7.一種計(jì)算機(jī)程序產(chǎn)品，其特征在于，包括軟件代碼部分，當(dāng)所述計(jì)算機(jī)程序產(chǎn)品在計(jì)算機(jī)上被運(yùn)行時(shí)，所述軟件代碼 部分用于執(zhí)行根據(jù)權(quán)利要求1-4任一項(xiàng)所述的違規(guī)丟棄垃圾行為檢測(cè)方法。

8.一種可讀存儲(chǔ)介質(zhì)，其特征在于，所述可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序包括用于控制過(guò)程以執(zhí)行過(guò)程的程序代碼，所述過(guò)程包括根據(jù)權(quán)利要求1至4任一項(xiàng)所述的違規(guī)丟棄垃圾行為檢測(cè)方法。