[發(fā)明專(zhuān)利]一種視頻幀去重方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202111574051.1
• 申請(qǐng)日: 2021-12-21
• 公開(kāi)（公告）號(hào): CN114298992A
• 公開(kāi)（公告）日: 2022-04-08
• 發(fā)明（設(shè)計(jì)）人: 楊蘇輝;聶磊
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類(lèi)號(hào): G06T7/00
• 分類(lèi)號(hào): G06T7/00;G06T7/73;G06K9/62;H04N5/262;H04N7/18;G06V10/75
• 代理公司: 北京柏杉松知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11413
• 代理人: 項(xiàng)京;高鶯然

本公開(kāi)提供了一種視頻幀去重方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)，涉及計(jì)算機(jī)領(lǐng)域，尤其涉及計(jì)算機(jī)視覺(jué)技術(shù)領(lǐng)域，具體涉及一種視頻幀去重方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。具體實(shí)現(xiàn)方案為：獲取巡視視頻，缺陷檢測(cè)，確定一目標(biāo)視頻幀；將目標(biāo)視頻幀以及目標(biāo)視頻幀的至少一個(gè)鄰近缺陷視頻幀輸入全局特征提取模型，得到目標(biāo)視頻幀的第一全局特征和鄰近缺陷視頻幀的第二全局特征，篩選出目標(biāo)視頻幀的候選視頻幀；基于第一缺陷特征描述信息、第二缺陷特征描述信息、目標(biāo)視頻幀的缺陷位置信息、候選視頻幀的缺陷位置信息，確定與目標(biāo)視頻幀的缺陷區(qū)域相同的視頻幀。實(shí)現(xiàn)了從粗粒度到細(xì)粒度的缺陷視頻幀去重，大幅提高了缺陷視頻幀去重的精準(zhǔn)度。

技術(shù)領(lǐng)域

本公開(kāi)涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及計(jì)算機(jī)視覺(jué)技術(shù)領(lǐng)域，具體涉及一種視頻幀去重方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

工業(yè)場(chǎng)景中有大量的工控設(shè)備需要精細(xì)化的維護(hù)，為了對(duì)工控設(shè)備進(jìn)行維護(hù)，目前采用工業(yè)探針在工控設(shè)備內(nèi)部巡視，產(chǎn)生工控設(shè)備的巡視視頻，從中篩選出包含缺陷區(qū)域的缺陷視頻幀，根據(jù)這些缺陷視頻幀判斷工控設(shè)備的缺陷類(lèi)型、缺陷位置、缺陷程度等，便于后續(xù)維護(hù)。

發(fā)明內(nèi)容

本公開(kāi)提供了一種車(chē)機(jī)功能喚醒的方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

根據(jù)本公開(kāi)的一方面，提供了一種視頻幀去重方法，包括：

獲取巡視視頻，對(duì)所述巡視視頻中的視頻幀進(jìn)行缺陷檢測(cè)，確定缺陷視頻幀和每個(gè)缺陷視頻幀的缺陷位置信息，并從所述缺陷視頻幀中確定一目標(biāo)視頻幀；

將所述目標(biāo)視頻幀以及所述目標(biāo)視頻幀的至少一個(gè)鄰近缺陷視頻幀輸入全局特征提取模型，得到所述目標(biāo)視頻幀的第一全局特征和所述鄰近缺陷視頻幀的第二全局特征，并基于所述第一全局特征和所述第二全局特征的特征距離，從所述鄰近缺陷視頻幀中篩選出所述目標(biāo)視頻幀的候選視頻幀；

分別提取所述目標(biāo)視頻幀的第一缺陷特征描述信息和所述候選視頻幀的第二缺陷特征描述信息，基于所述第一缺陷特征描述信息、所述第二缺陷特征描述信息、所述目標(biāo)視頻幀的缺陷位置信息、所述候選視頻幀的缺陷位置信息，從所述候選視頻幀中確定與所述目標(biāo)視頻幀的缺陷區(qū)域相同的視頻幀，作為去重視頻幀。

根據(jù)本公開(kāi)的另一方面，提供了一種視頻幀去重裝置，包括：

巡視視頻獲取模塊，用于獲取巡視視頻，對(duì)所述巡視視頻中的視頻幀進(jìn)行缺陷檢測(cè)，確定缺陷視頻幀和每個(gè)缺陷視頻幀的缺陷位置信息，并從所述缺陷視頻幀中確定一目標(biāo)視頻幀；

全局特征篩選模塊，用于將所述目標(biāo)視頻幀以及所述目標(biāo)視頻幀的至少一個(gè)鄰近缺陷視頻幀輸入全局特征提取模型，得到所述目標(biāo)視頻幀的第一全局特征和所述鄰近缺陷視頻幀的第二全局特征，并基于所述第一全局特征和所述第二全局特征的特征距離，從所述鄰近缺陷視頻幀中篩選出所述目標(biāo)視頻幀的候選視頻幀；

去重模塊，用于分別提取所述目標(biāo)視頻幀的第一缺陷特征描述信息和所述候選視頻幀的第二缺陷特征描述信息，基于所述第一缺陷特征描述信息、所述第二缺陷特征描述信息、所述目標(biāo)視頻幀的缺陷位置信息、所述候選視頻幀的缺陷位置信息，從所述候選視頻幀中確定與所述目標(biāo)視頻幀的缺陷區(qū)域相同的視頻幀，作為去重視頻幀。

根據(jù)本公開(kāi)的另一方面，提供了一種電子設(shè)備，包括：

至少一個(gè)處理器；以及

與所述至少一個(gè)處理器通信連接的存儲(chǔ)器；其中，

所述存儲(chǔ)器存儲(chǔ)有可被所述至少一個(gè)處理器執(zhí)行的指令，所述指令被所述至少一個(gè)處理器執(zhí)行，以使所述至少一個(gè)處理器能夠執(zhí)行視頻幀去重方法。

根據(jù)本公開(kāi)的另一方面，提供了一種存儲(chǔ)有計(jì)算機(jī)指令的非瞬時(shí)計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其中，所述計(jì)算機(jī)指令用于使所述計(jì)算機(jī)執(zhí)行視頻幀去重方法。