[發(fā)明專利]復(fù)盤視頻幀確定方法、裝置、計(jì)算機(jī)設(shè)備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011148121.2
• 申請日: 2020-10-23
• 公開（公告）號: CN112380922A
• 公開（公告）日: 2021-02-19
• 發(fā)明（設(shè)計(jì)）人: 劉利君;許勇斌
• 申請（專利權(quán)）人: 嶺東核電有限公司;廣東核電合營有限公司;嶺澳核電有限公司;大亞灣核電運(yùn)營管理有限責(zé)任公司;中國廣核集團(tuán)有限公司;中國廣核電力股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;H04N5/76
• 代理公司: 廣州華進(jìn)聯(lián)合專利商標(biāo)代理有限公司 44224
• 代理人: 陳小娜

1.一種復(fù)盤視頻幀確定方法，其特征在于，所述方法包括：

當(dāng)接收到復(fù)盤終端發(fā)送的復(fù)盤指令時(shí)，對所述復(fù)盤指令進(jìn)行解析，得到待復(fù)盤的目標(biāo)試驗(yàn)工序的目標(biāo)工序標(biāo)識；

根據(jù)所述目標(biāo)工序標(biāo)識，確定對應(yīng)的目標(biāo)試驗(yàn)視頻和目標(biāo)試驗(yàn)工單；

根據(jù)所述目標(biāo)試驗(yàn)工單，確定所述目標(biāo)試驗(yàn)工序的執(zhí)行時(shí)間段；

從所述目標(biāo)試驗(yàn)視頻中截取與所述執(zhí)行時(shí)間段相對應(yīng)的目標(biāo)視頻片段；

對所述目標(biāo)視頻片段中的視頻幀進(jìn)行內(nèi)容識別，確定包含有當(dāng)前操作設(shè)備零件的零件圖像的目標(biāo)視頻幀，將所述目標(biāo)視頻幀返回至所述復(fù)盤終端。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述目標(biāo)工序標(biāo)識，確定對應(yīng)的目標(biāo)試驗(yàn)視頻和目標(biāo)試驗(yàn)工單，包括：

獲取候選試驗(yàn)工單集；

從所述候選試驗(yàn)工單集篩選出包含有所述目標(biāo)工序標(biāo)識的目標(biāo)試驗(yàn)工單；

通過所述目標(biāo)試驗(yàn)工單，確定對應(yīng)的目標(biāo)核電試驗(yàn)標(biāo)識；

通過所述目標(biāo)核電試驗(yàn)標(biāo)識，確定針對目標(biāo)核電試驗(yàn)的試驗(yàn)過程進(jìn)行錄制的目標(biāo)試驗(yàn)視頻。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對所述目標(biāo)視頻片段中的視頻幀進(jìn)行內(nèi)容識別，確定包含有當(dāng)前操作設(shè)備零件的零件圖像的目標(biāo)視頻幀，包括：

對所述目標(biāo)視頻片段中的當(dāng)前檢測視頻幀進(jìn)行手部檢測，得到對應(yīng)的手部區(qū)域；

基于所述手部區(qū)域，判斷所述當(dāng)前檢測視頻幀中是否包含有當(dāng)前操作設(shè)備零件的零件圖像；

在所述當(dāng)前檢測視頻幀包含當(dāng)前操作設(shè)備零件的零件圖像時(shí)，將所述當(dāng)前檢測視頻幀作為包含有當(dāng)前操作設(shè)備零件的零件圖像的目標(biāo)視頻幀。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

獲取待生成工序標(biāo)識的試驗(yàn)工序的工序信息；

基于預(yù)設(shè)信息分割符對所述工序信息進(jìn)行分割，得到至少一個(gè)信息片段；

確定每個(gè)信息片段各自對應(yīng)的編碼方式，并按照所述編碼方式對相應(yīng)的信息片段進(jìn)行編碼，得到對應(yīng)的工序子標(biāo)識碼；

確定所述工序子標(biāo)識碼的標(biāo)識碼總數(shù)，根據(jù)所述標(biāo)識碼總數(shù)、以及各工序子標(biāo)識碼，生成對應(yīng)的工序標(biāo)識。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述試驗(yàn)工單的生成步驟包括：

當(dāng)觸發(fā)執(zhí)行時(shí)間輸入操作時(shí)，通過試驗(yàn)終端獲取所輸入的執(zhí)行時(shí)間；

通過所述試驗(yàn)終端，確定所述執(zhí)行時(shí)間指向的執(zhí)行試驗(yàn)工序；

通過所述試驗(yàn)終端，將所述執(zhí)行時(shí)間寫入所指向的執(zhí)行試驗(yàn)工序的工序信息中；

當(dāng)觸發(fā)試驗(yàn)工單生成操作時(shí)，通過所述試驗(yàn)終端綜合各執(zhí)行試驗(yàn)工序的工序信息，得到對應(yīng)的試驗(yàn)工單。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

提取所述目標(biāo)視頻片段中的現(xiàn)場語音片段，并基于預(yù)訓(xùn)練的語音識別模型對所述現(xiàn)場語音片段進(jìn)行識別，得到語音字幕；

從所述語音字幕中提取多個(gè)關(guān)鍵詞；所述關(guān)鍵詞包括基礎(chǔ)關(guān)鍵詞以及從屬關(guān)鍵詞；

根據(jù)所述基礎(chǔ)關(guān)鍵詞以及從屬關(guān)鍵詞的詞義，確定所述語音字幕中的基礎(chǔ)關(guān)鍵詞數(shù)量；

當(dāng)所述語音字幕中的基礎(chǔ)關(guān)鍵詞數(shù)量超過預(yù)設(shè)數(shù)量閾值時(shí)，根據(jù)所述現(xiàn)場語音片段的采集時(shí)間，將所述語音字幕添加至對應(yīng)的目標(biāo)視頻幀中。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

當(dāng)所述目標(biāo)視頻片段中具有多幀目標(biāo)視頻幀時(shí)，從所述目標(biāo)視頻幀中截取當(dāng)前操作設(shè)備零件的零件圖像、以及與所述當(dāng)前操作設(shè)備零件相接觸的手部的手部圖像；

確定所述零件圖像中的零件完整度、以及所述手部圖像中的手部完整度；

根據(jù)所述零件完整度和所述手部完整度，對相應(yīng)目標(biāo)視頻幀進(jìn)行圖像評分；

根據(jù)所述圖像評分，確定所述目標(biāo)視頻片段中的重點(diǎn)目標(biāo)視頻幀和次要目標(biāo)視頻幀。