[發(fā)明專利]基于槍球聯(lián)動(dòng)的監(jiān)控方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202110429303.5
• 申請(qǐng)日: 2021-04-21
• 公開(kāi)（公告）號(hào): CN113095261B
• 公開(kāi)（公告）日: 2023-09-05
• 發(fā)明（設(shè)計(jì)）人: 郝希瑞;王峰;張全磊;張?zhí)煲?/a>
• 申請(qǐng)（專利權(quán)）人: 蘇州科達(dá)科技股份有限公司
• 主分類(lèi)號(hào): G06V40/10
• 分類(lèi)號(hào): G06V40/10;G06V20/52;G06V10/75;G06V20/40
• 代理公司: 上海隆天律師事務(wù)所 31282
• 代理人: 夏彬

本發(fā)明提供了一種基于槍球聯(lián)動(dòng)的監(jiān)控方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)，所述方法包括：槍機(jī)在自身采集的圖像中進(jìn)行第一目標(biāo)檢測(cè)，將檢測(cè)到的第一目標(biāo)加入第一跟蹤隊(duì)列；所述槍機(jī)從所述第一跟蹤隊(duì)列中依次選擇第一目標(biāo)作為抓拍目標(biāo)，將選擇的抓拍目標(biāo)的特征和目標(biāo)標(biāo)識(shí)發(fā)送至球機(jī)；所述球機(jī)將自身拍攝的與所述抓拍目標(biāo)的特征匹配的圖像加入第二跟蹤隊(duì)列；所述球機(jī)于當(dāng)前接收到的目標(biāo)標(biāo)識(shí)與前一時(shí)刻接收到的目標(biāo)標(biāo)識(shí)不同時(shí)，從所述第二跟蹤隊(duì)列獲取一圖像，作為前一時(shí)刻接收到的目標(biāo)標(biāo)識(shí)對(duì)應(yīng)的抓拍圖像。通過(guò)采用本發(fā)明，提高槍球聯(lián)動(dòng)對(duì)行人檢測(cè)和抓拍的準(zhǔn)確率，減少跟蹤不夠準(zhǔn)確和重復(fù)抓拍上報(bào)的問(wèn)題。

背景技術(shù)

隨著深度學(xué)習(xí)的普及和監(jiān)控行業(yè)的市場(chǎng)需求擴(kuò)張，市場(chǎng)對(duì)智能抓拍攝像機(jī)的應(yīng)用場(chǎng)景做了更加細(xì)分的分類(lèi)，不再局限于出入口、道路和室內(nèi)，對(duì)廣場(chǎng)的應(yīng)用場(chǎng)景也越來(lái)越普遍，針對(duì)廣場(chǎng)場(chǎng)景單個(gè)槍機(jī)和球機(jī)是解決不了的，需要槍機(jī)和球機(jī)配合才能抓拍到清晰的行人供上層使用，槍機(jī)主要負(fù)責(zé)行人檢測(cè)、跟蹤和向球機(jī)發(fā)送PTZ和抓拍命令，球機(jī)主要負(fù)責(zé)行人抓拍和執(zhí)行PTZ命令控制云臺(tái)轉(zhuǎn)動(dòng)。

目前基于槍球聯(lián)動(dòng)的監(jiān)控主要包括行人目標(biāo)檢測(cè)和抓拍。其中，行人目標(biāo)檢測(cè)主要是提取圖像中的行人目標(biāo)，分為傳統(tǒng)和現(xiàn)代方法，傳統(tǒng)的方法大部分都是基于經(jīng)驗(yàn)特征提取，包括hog、haar和lbp特征，提取完特征后使用支持向量機(jī)SVM和adaboost分類(lèi)器進(jìn)行訓(xùn)練和檢測(cè)，然而這種傳統(tǒng)的特征提取不能夠準(zhǔn)確的描述行人，導(dǎo)致檢測(cè)準(zhǔn)確率不高，隨著深度學(xué)習(xí)的普及，研究人員開(kāi)始使用表達(dá)能力更好的卷積神經(jīng)網(wǎng)絡(luò)CNN做行人特征提取器，當(dāng)前用的比較成熟的CNN特征提取器包括mobilenet、vgg、googlenet和resnet。行人目標(biāo)跟蹤包括基于傳統(tǒng)的跟蹤算法和基于檢測(cè)的跟蹤算法，傳統(tǒng)的跟蹤算法主要包含光流optical?flow、卡爾曼濾波Kalman?filtering和均值漂移mean?shfit，當(dāng)前使用比較多的基于檢測(cè)的跟蹤算法是deep_sort。

當(dāng)前槍球聯(lián)動(dòng)主要存在的問(wèn)題是行人檢測(cè)準(zhǔn)確率不夠、跟蹤不準(zhǔn)確、行人重復(fù)抓拍和抓拍行人非槍機(jī)當(dāng)前跟蹤目標(biāo)等問(wèn)題。

發(fā)明內(nèi)容

針對(duì)現(xiàn)有技術(shù)中的問(wèn)題，本發(fā)明的目的在于提供一種基于槍球聯(lián)動(dòng)的監(jiān)控方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)，提高槍球聯(lián)動(dòng)對(duì)行人檢測(cè)和抓拍的準(zhǔn)確率，減少跟蹤不夠準(zhǔn)確和重復(fù)抓拍上報(bào)的問(wèn)題。

本發(fā)明實(shí)施例提供一種基于槍球聯(lián)動(dòng)的監(jiān)控方法，包括如下步驟：

槍機(jī)在自身采集的圖像中進(jìn)行第一目標(biāo)檢測(cè)，將檢測(cè)到的第一目標(biāo)加入第一跟蹤隊(duì)列；

所述槍機(jī)從所述第一跟蹤隊(duì)列中依次選擇第一目標(biāo)作為抓拍目標(biāo)，將選擇的抓拍目標(biāo)的特征和目標(biāo)標(biāo)識(shí)發(fā)送至球機(jī)；

所述球機(jī)將自身拍攝的與所述抓拍目標(biāo)的特征匹配的圖像加入第二跟蹤隊(duì)列；

所述球機(jī)于當(dāng)前接收到的目標(biāo)標(biāo)識(shí)與前一時(shí)刻接收到的目標(biāo)標(biāo)識(shí)不同時(shí)，從所述第二跟蹤隊(duì)列獲取一圖像，作為前一時(shí)刻接收到的目標(biāo)標(biāo)識(shí)對(duì)應(yīng)的抓拍圖像。

本發(fā)明的基于槍球聯(lián)動(dòng)的監(jiān)控方法通過(guò)槍機(jī)和球機(jī)聯(lián)合進(jìn)行目標(biāo)檢測(cè)，球機(jī)根據(jù)特征匹配來(lái)選擇加入到第二跟蹤隊(duì)列中的圖像，并且根據(jù)槍機(jī)發(fā)送的抓拍目標(biāo)的目標(biāo)標(biāo)識(shí)的變化來(lái)選擇抓拍圖像，從而通過(guò)特征匹配解決球機(jī)行人跟蹤不夠準(zhǔn)確的問(wèn)題，通過(guò)根據(jù)目標(biāo)標(biāo)識(shí)的變化選擇抓拍圖像，保證抓拍圖像與目標(biāo)的對(duì)應(yīng)性，解決現(xiàn)有技術(shù)中重復(fù)抓拍上報(bào)的問(wèn)題，并且通過(guò)與槍機(jī)的抓拍目標(biāo)的特征進(jìn)行匹配，僅選擇與槍機(jī)的抓拍目標(biāo)的特征相匹配的抓拍圖像，解決現(xiàn)有技術(shù)中抓拍不是當(dāng)前槍機(jī)跟蹤的目標(biāo)的問(wèn)題，提高槍球監(jiān)控中對(duì)目標(biāo)檢測(cè)和抓拍的準(zhǔn)確率。

在一些實(shí)施例中，所述基于槍球聯(lián)動(dòng)的監(jiān)控方法還包括如下步驟：

還包括如下步驟：

所述槍機(jī)對(duì)當(dāng)前抓拍目標(biāo)進(jìn)行跟蹤；