[發(fā)明專利]吸煙行為檢測(cè)方法、電子設(shè)備及可讀存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110797674.9
• 申請(qǐng)日: 2021-07-14
• 公開(kāi)（公告）號(hào): CN113505707A
• 公開(kāi)（公告）日: 2021-10-15
• 發(fā)明（設(shè)計(jì)）人: 洪國(guó)偉;曹成志;雷兆恒
• 申請(qǐng)（專利權(quán)）人: 騰訊音樂(lè)娛樂(lè)科技（深圳）有限公司
• 主分類號(hào): G06K9/00
• 分類號(hào): G06K9/00;G06K9/62;G06K9/46;G06N3/04
• 代理公司: 深圳市深佳知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44285
• 代理人: 陳彥如

1.一種吸煙行為檢測(cè)方法，其特征在于，包括：

獲取待測(cè)圖像，并將所述待測(cè)圖像輸入以香煙為目標(biāo)的目標(biāo)檢測(cè)模型，確定疑似香煙范圍；

識(shí)別所述待測(cè)圖像中的多個(gè)人臉關(guān)鍵點(diǎn)，并利用所述人臉關(guān)鍵點(diǎn)確定嘴部范圍；

計(jì)算所述疑似香煙范圍與所述嘴部范圍之間的匹配參數(shù)，其中，所述匹配參數(shù)為所述疑似香煙范圍與所述嘴部范圍之間的目標(biāo)距離，和/或，所述嘴部范圍與所述疑似香煙范圍之間的交集面積；

若所述匹配參數(shù)處于預(yù)設(shè)范圍，則確定所述待測(cè)圖像中存在吸煙行為。

2.根據(jù)權(quán)利要求1所述的吸煙行為檢測(cè)方法，其特征在于，還包括：

獲取待測(cè)視頻，并在所述待測(cè)視頻中確定若干個(gè)候選視頻幀；

相應(yīng)的，所述獲取待測(cè)圖像，包括：

按照預(yù)設(shè)順序選擇一個(gè)所述候選視頻幀作為所述待測(cè)圖像；

所述吸煙行為檢測(cè)方法，還包括：

若檢測(cè)到所有的所述候選視頻幀均檢測(cè)完畢，且具有所述吸煙行為的異常視頻幀數(shù)量大于異常閾值，則確定所述待測(cè)視頻為異常視頻。

3.根據(jù)權(quán)利要求1所述的吸煙行為檢測(cè)方法，其特征在于，在將所述待測(cè)圖像輸入以香煙為目標(biāo)的目標(biāo)檢測(cè)模型之后，還包括：

若所述目標(biāo)檢測(cè)模型輸出確定香煙范圍，則確定所述待測(cè)圖像中存在吸煙行為。

4.根據(jù)權(quán)利要求1所述的吸煙行為檢測(cè)方法，其特征在于，還包括：

對(duì)所述待測(cè)圖像進(jìn)行手勢(shì)語(yǔ)義識(shí)別處理，得到手勢(shì)識(shí)別結(jié)果；

相應(yīng)的，所述若所述匹配參數(shù)處于預(yù)設(shè)范圍，則確定所述待測(cè)圖像中存在吸煙行為，包括：

若所述匹配參數(shù)處于所述預(yù)設(shè)范圍且所述手勢(shì)識(shí)別結(jié)果為命中，則確定所述待測(cè)圖像中存在所述吸煙行為。

5.根據(jù)權(quán)利要求4所述的吸煙行為檢測(cè)方法，其特征在于，所述對(duì)所述待測(cè)圖像進(jìn)行手勢(shì)語(yǔ)義識(shí)別處理，得到手勢(shì)識(shí)別結(jié)果，包括：

將所述待測(cè)圖像中的非膚色區(qū)域刪除，得到膚色區(qū)域；

對(duì)所述膚色區(qū)域進(jìn)行邊緣提取處理，得到輪廓圖像；

將所述輪廓圖像輸入手勢(shì)分類模型，得到所述手勢(shì)識(shí)別結(jié)果。

6.根據(jù)權(quán)利要求5所述的吸煙行為檢測(cè)方法，其特征在于，所述將所述待測(cè)圖像中的非膚色區(qū)域刪除，得到膚色區(qū)域，包括：

判斷所述待測(cè)圖像中各個(gè)像素在各個(gè)通道的通道像素值是否處于對(duì)應(yīng)的通道區(qū)間；

若各個(gè)所述通道像素值均處于所述通道區(qū)間，則確定所述像素處于初始膚色區(qū)域；

對(duì)所述初始膚色區(qū)域進(jìn)行腐蝕處理和膨脹處理，并將所述膚色區(qū)域以外的所述非膚色區(qū)域內(nèi)的圖像刪除，得到所述膚色區(qū)域。

7.根據(jù)權(quán)利要求1所述的吸煙行為檢測(cè)方法，其特征在于，所述將所述待測(cè)圖像輸入以香煙為目標(biāo)的目標(biāo)檢測(cè)模型，確定疑似香煙范圍，包括：

將所述待測(cè)圖像輸入以香煙為目標(biāo)的目標(biāo)檢測(cè)模型，得到疑似香煙坐標(biāo)；

確定范圍長(zhǎng)寬參數(shù)，并基于所述范圍長(zhǎng)寬參數(shù)，利用所述疑似香煙坐標(biāo)確定所述疑似香煙范圍。

8.根據(jù)權(quán)利要求1所述的吸煙行為檢測(cè)方法，其特征在于，所述目標(biāo)檢測(cè)模型的訓(xùn)練過(guò)程，包括：

獲取多個(gè)初始訓(xùn)練圖像，并對(duì)所述初始訓(xùn)練圖像進(jìn)行數(shù)據(jù)增強(qiáng)處理，得到訓(xùn)練圖像；

將所述訓(xùn)練圖像輸入初始模型，得到訓(xùn)練識(shí)別范圍；

計(jì)算所述訓(xùn)練識(shí)別范圍與所述訓(xùn)練圖像的標(biāo)簽范圍之間的范圍距離，并利用所述范圍距離對(duì)所述初始模型的模型參數(shù)進(jìn)行調(diào)整。

9.根據(jù)權(quán)利要求8所述的吸煙行為檢測(cè)方法，其特征在于，所述對(duì)所述初始訓(xùn)練圖像進(jìn)行數(shù)據(jù)增強(qiáng)處理，得到訓(xùn)練圖像，包括：

對(duì)任意多個(gè)所述初始訓(xùn)練圖像分別進(jìn)行隨機(jī)裁剪處理和/或隨機(jī)縮放處理，得到多個(gè)目標(biāo)初始訓(xùn)練圖像；

對(duì)所述多個(gè)目標(biāo)初始訓(xùn)練圖像進(jìn)行隨機(jī)排布拼接，得到一個(gè)所述訓(xùn)練圖像。