[發(fā)明專利]視頻標(biāo)簽生成方法、裝置及設(shè)備

有效

• 申請?zhí)枺?/td>: 202111091260.0
• 申請日: 2021-09-17
• 公開（公告）號: CN113821681B
• 公開（公告）日: 2023-09-26
• 發(fā)明（設(shè)計）人: 曹軍偉;徐高峰
• 申請（專利權(quán)）人: 深圳力維智聯(lián)技術(shù)有限公司;南京中興力維軟件有限公司
• 主分類號: G06F16/78
• 分類號: G06F16/78;G06F16/783;G06F16/75
• 代理公司: 深圳鼎合誠知識產(chǎn)權(quán)代理有限公司 44281
• 代理人: 郭燕;彭家恩

1.一種視頻標(biāo)簽生成方法，其特征在于，所述方法包括：

以預(yù)設(shè)頻率從視頻中獲取圖片，并將獲取到的每一張圖片分別輸入預(yù)先訓(xùn)練好的安全事件識別模型中，判斷各圖片是否包含預(yù)設(shè)安全事件標(biāo)識信息，其中，所述安全事件識別模型基于標(biāo)注了是否包含預(yù)設(shè)安全事件標(biāo)識信息的樣本圖片訓(xùn)練得到；

對包含預(yù)設(shè)安全事件標(biāo)識信息的每張圖片分別進行圖像識別，得到用于描述圖片的結(jié)構(gòu)化文本信息，并將圖片及其對應(yīng)的結(jié)構(gòu)化文本信息關(guān)聯(lián)存儲于視圖庫中；

對于所述視圖庫的每張圖片，通過自然語言處理NLP識別算法，從該圖片的結(jié)構(gòu)化文本信息中提取安全事件關(guān)鍵信息，生成該圖片的視頻標(biāo)簽，所述安全事件關(guān)鍵信息包括：安全事件發(fā)生時間、安全事件發(fā)生地點和安全事件內(nèi)容；

所述方法還包括：獲取用戶的目標(biāo)檢索文本信息；分別計算所述目標(biāo)檢索文本信息與所述視圖庫中各圖片的結(jié)構(gòu)化文本信息的第一匹配度；將所述第一匹配度大于等于第一預(yù)設(shè)閾值的所述視圖庫中的圖片確定為目標(biāo)圖片；根據(jù)所述目標(biāo)圖片，確定安全事件；

所述視頻標(biāo)簽包括圖片在所述視頻中的錄像時間，所述方法還包括：若各所述第一匹配度均小于所述第一預(yù)設(shè)閾值，則分別計算所述目標(biāo)檢索文本信息與所述視圖庫中各圖片的視頻標(biāo)簽的第二匹配度；將所述第二匹配度大于第二預(yù)設(shè)閾值的視頻標(biāo)簽所包括的錄像時間確定為目標(biāo)錄像時間；根據(jù)所述目標(biāo)錄像時間，確定需要回放的視頻片段；根據(jù)所述需要回放的視頻片段，確定安全事件；

所述獲取用戶的目標(biāo)檢索文本信息，包括：獲取用戶輸入的原始檢索信息；通過所述NLP識別算法，從所述原始檢索信息中提取檢索條件關(guān)鍵信息，生成目標(biāo)檢索文本信息；

所述方法還包括：通過預(yù)設(shè)顯示方式，在所述視頻上顯示生成的所述視頻標(biāo)簽；

所述方法還包括：對所述視圖庫中各圖片的視頻標(biāo)簽進行驗證，對存在錯誤的所述視頻標(biāo)簽進行修改，得到修改后的視頻標(biāo)簽。

2.一種視頻標(biāo)簽生成裝置，其特征在于，所述裝置包括：

判斷模塊，用于以預(yù)設(shè)頻率從視頻中獲取圖片，并將獲取到的每一張圖片分別輸入預(yù)先訓(xùn)練好的安全事件識別模型中，判斷各圖片是否包含預(yù)設(shè)安全事件標(biāo)識信息，其中，所述安全事件識別模型基于標(biāo)注了是否包含預(yù)設(shè)安全事件標(biāo)識信息的樣本圖片訓(xùn)練得到；

獲取模塊，用于對包含預(yù)設(shè)安全事件標(biāo)識信息的每張圖片分別進行圖像識別，得到用于描述圖片的結(jié)構(gòu)化文本信息，并將圖片及其對應(yīng)的結(jié)構(gòu)化文本信息關(guān)聯(lián)存儲于視圖庫中；

生成模塊，用于對于所述視圖庫的每張圖片，通過自然語言處理NLP識別算法，從該圖片的結(jié)構(gòu)化文本信息中提取安全事件關(guān)鍵信息，生成該圖片的視頻標(biāo)簽，所述視頻標(biāo)簽包括圖片在所述視頻中的錄像時間，所述安全事件關(guān)鍵信息包括：安全事件發(fā)生時間、安全事件發(fā)生地點和安全事件內(nèi)容；

確定模塊，用于獲取用戶的目標(biāo)檢索文本信息，包括，獲取用戶輸入的原始檢索信息，通過所述NLP識別算法，從所述原始檢索信息中提取檢索條件關(guān)鍵信息，生成目標(biāo)檢索文本信息；分別計算所述目標(biāo)檢索文本信息與所述視圖庫中各圖片的結(jié)構(gòu)化文本信息的第一匹配度；將所述第一匹配度大于等于第一預(yù)設(shè)閾值的所述視圖庫中的圖片確定為目標(biāo)圖片，根據(jù)所述目標(biāo)圖片，確定安全事件；若各所述第一匹配度均小于所述第一預(yù)設(shè)閾值，則分別計算所述目標(biāo)檢索文本信息與所述視圖庫中各圖片的視頻標(biāo)簽的第二匹配度，將所述第二匹配度大于第二預(yù)設(shè)閾值的視頻標(biāo)簽所包括的錄像時間確定為目標(biāo)錄像時間，根據(jù)所述目標(biāo)錄像時間，確定需要回放的視頻片段，根據(jù)所述需要回放的視頻片段，確定安全事件；

用于通過預(yù)設(shè)顯示方式，在所述視頻上顯示生成的所述視頻標(biāo)簽的模塊；

用于對所述視圖庫中各圖片的視頻標(biāo)簽進行驗證，對存在錯誤的所述視頻標(biāo)簽進行修改，得到修改后的視頻標(biāo)簽的模塊。

3.一種電子設(shè)備，其特征在于，包括：

存儲器，用于存儲程序；

處理器，用于通過執(zhí)行所述存儲器存儲的程序以實現(xiàn)如權(quán)利要求1所述的方法。

4.一種計算機可讀存儲介質(zhì)，其特征在于，所述介質(zhì)上存儲有程序，所述程序能夠被處理器執(zhí)行以實現(xiàn)如權(quán)利要求1所述的方法。