[發(fā)明專利]基于機(jī)器視覺的人員狀態(tài)檢測(cè)方法及相關(guān)裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202210162008.2
• 申請(qǐng)日: 2022-02-22
• 公開（公告）號(hào): CN114519532A
• 公開（公告）日: 2022-05-20
• 發(fā)明（設(shè)計(jì)）人: 張?jiān)铺?/a>;謝思敏
• 申請(qǐng)（專利權(quán)）人: 杭州聯(lián)吉技術(shù)有限公司
• 主分類號(hào): G06Q10/06
• 分類號(hào): G06Q10/06;G06V20/40;G06V40/10;G06V40/16;G06V40/20;G06K9/62;G06V10/764;G06V10/25;G06V10/82;G06T7/20;G06N3/04
• 代理公司: 深圳中一聯(lián)合知識(shí)產(chǎn)權(quán)代理有限公司 44414
• 代理人: 許爍

本申請(qǐng)適用于監(jiān)控技術(shù)領(lǐng)域，本申請(qǐng)實(shí)施例提供了基于機(jī)器視覺的人員狀態(tài)檢測(cè)方法及相關(guān)裝置，該方法結(jié)合了深度神經(jīng)網(wǎng)絡(luò)、多目標(biāo)跟蹤算法、身份識(shí)別算法和前景區(qū)域識(shí)別，能夠?qū)ΡO(jiān)控畫面中的多個(gè)人員進(jìn)行跟蹤和身份識(shí)別，從而能夠?qū)崿F(xiàn)對(duì)監(jiān)控視頻區(qū)域內(nèi)的多人離崗/睡崗檢測(cè)。

技術(shù)領(lǐng)域

本申請(qǐng)屬于監(jiān)控技術(shù)領(lǐng)域，尤其涉及基于機(jī)器視覺的人員狀態(tài)檢測(cè)方法及相關(guān)裝置。

背景技術(shù)

隨著現(xiàn)代科技的發(fā)展，監(jiān)控?cái)z像頭的應(yīng)用越趨廣泛，其中，人員工作狀態(tài)的監(jiān)控能夠大大提高工作人員的工作效率，防止無故離崗/睡崗。特別地，在酒店前臺(tái)，工廠工位，保安門崗等場(chǎng)景，采用監(jiān)控?cái)z像頭進(jìn)行監(jiān)控十分有效。

在監(jiān)控方面，傳統(tǒng)的人工監(jiān)控不僅人力成本高，而且監(jiān)控效果不好。因此，采用機(jī)器視覺來幫助確定監(jiān)控畫面中的人員狀態(tài)是研究人員在監(jiān)控領(lǐng)域的一個(gè)熱門方向。

然而，若監(jiān)控畫面中存在多個(gè)工作人員，有些工作人員正常工作，有些工作人員偷偷離開崗位或者讓其他人代替，或者當(dāng)人員背對(duì)相機(jī)時(shí)無法進(jìn)行人臉識(shí)別從而誤觸離崗計(jì)時(shí)，則目前的監(jiān)控技術(shù)無法識(shí)別出來。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了基于機(jī)器視覺的人員狀態(tài)檢測(cè)方法及相關(guān)裝置，可以對(duì)多個(gè)工作人員進(jìn)行身份識(shí)別認(rèn)證。

第一方面，本申請(qǐng)實(shí)施例提供了一種基于機(jī)器視覺的人員狀態(tài)檢測(cè)方法，包括：通過深度神經(jīng)網(wǎng)絡(luò)獲取監(jiān)控視頻中的目標(biāo)檢測(cè)框；根據(jù)目標(biāo)檢測(cè)框，通過多目標(biāo)跟蹤算法獲取監(jiān)控視頻中的目標(biāo)移動(dòng)軌跡，目標(biāo)移動(dòng)軌跡用于表示目標(biāo)檢測(cè)框的移動(dòng)軌跡；通過身份識(shí)別算法獲取目標(biāo)移動(dòng)軌跡對(duì)應(yīng)的人員身份信息，人員身份信息用于表示目標(biāo)人員的身份；確定所述監(jiān)控視頻中的前景區(qū)域，所述前景區(qū)域用于標(biāo)記所述監(jiān)控視頻中每個(gè)像素點(diǎn)的運(yùn)動(dòng)狀態(tài)；根據(jù)所述人員身份信息、所述目標(biāo)移動(dòng)軌跡以及所述前景區(qū)域?qū)λ瞿繕?biāo)人員進(jìn)行崗位督察。

結(jié)合第一方面，在本申請(qǐng)實(shí)施例的一種實(shí)現(xiàn)方式中，通過身份識(shí)別算法獲取目標(biāo)移動(dòng)軌跡對(duì)應(yīng)的人員身份信息，包括：根據(jù)目標(biāo)移動(dòng)軌跡對(duì)應(yīng)的多個(gè)目標(biāo)檢測(cè)框確定目標(biāo)人員面對(duì)監(jiān)控?cái)z像頭的圖像，監(jiān)控?cái)z像頭用于獲取監(jiān)控視頻；根據(jù)目標(biāo)人員面對(duì)監(jiān)控?cái)z像頭的圖像確定目標(biāo)人員對(duì)應(yīng)的人員身份信息；建立人員身份信息與目標(biāo)移動(dòng)軌跡的關(guān)聯(lián)關(guān)系，關(guān)聯(lián)關(guān)系用于在對(duì)所述目標(biāo)人員進(jìn)行崗位督察時(shí)進(jìn)行身份關(guān)聯(lián)確定。例如，當(dāng)確定目標(biāo)移動(dòng)軌跡離開監(jiān)控視頻的指定區(qū)域時(shí)，可以根據(jù)關(guān)聯(lián)關(guān)系確定人員身份信息對(duì)應(yīng)的目標(biāo)人員離開監(jiān)控視頻的指定區(qū)域，從而進(jìn)行離崗檢測(cè)。或者，當(dāng)確定目標(biāo)移動(dòng)軌跡對(duì)應(yīng)的目標(biāo)檢測(cè)框內(nèi)的目標(biāo)人員為靜止?fàn)顟B(tài)或運(yùn)動(dòng)狀態(tài)時(shí)，將關(guān)聯(lián)關(guān)系對(duì)應(yīng)的人員身份信息標(biāo)記為靜止?fàn)顟B(tài)或運(yùn)動(dòng)狀態(tài)，從而進(jìn)行睡崗檢測(cè)。

結(jié)合第一方面，在本申請(qǐng)實(shí)施例的一種實(shí)現(xiàn)方式中，方法還包括：當(dāng)所述目標(biāo)人員離開所述監(jiān)控視頻的指定區(qū)域時(shí)開始進(jìn)行離崗計(jì)時(shí)；若離崗計(jì)時(shí)的累計(jì)時(shí)間大于或等于第一預(yù)設(shè)閾值，則確定目標(biāo)人員離崗。

結(jié)合第一方面，在本申請(qǐng)實(shí)施例的一種實(shí)現(xiàn)方式中，方法還包括：若離崗計(jì)時(shí)的累計(jì)時(shí)間小于第一預(yù)設(shè)閾值，則確定目標(biāo)人員在崗。

結(jié)合第一方面，在本申請(qǐng)實(shí)施例的一種實(shí)現(xiàn)方式中，方法還包括：確定監(jiān)控視頻中的前景區(qū)域，前景區(qū)域用于標(biāo)記監(jiān)控視頻中每個(gè)像素點(diǎn)的運(yùn)動(dòng)狀態(tài)；若前景區(qū)域在目標(biāo)檢測(cè)框中的占比小于第二預(yù)設(shè)閾值，則確定目標(biāo)檢測(cè)框?qū)?yīng)的目標(biāo)人員為靜止?fàn)顟B(tài)，并開始進(jìn)行睡崗計(jì)時(shí)；若睡崗計(jì)時(shí)的累計(jì)時(shí)間大于或等于第三預(yù)設(shè)閾值，則確定目標(biāo)人員睡崗。

結(jié)合第一方面，在本申請(qǐng)實(shí)施例的一種實(shí)現(xiàn)方式中，方法還包括：若睡崗計(jì)時(shí)的累計(jì)時(shí)間小于第三預(yù)設(shè)閾值，則確定目標(biāo)人員在崗。

結(jié)合第一方面，在本申請(qǐng)實(shí)施例的一種實(shí)現(xiàn)方式中，方法還包括：若前景區(qū)域在目標(biāo)檢測(cè)框中的占比大于或等于第二預(yù)設(shè)閾值，則確定目標(biāo)檢測(cè)框?qū)?yīng)的目標(biāo)人員為運(yùn)動(dòng)狀態(tài)。