[發(fā)明專(zhuān)利]變電作業(yè)場(chǎng)景的標(biāo)識(shí)模型訓(xùn)練方法、標(biāo)識(shí)方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 202010518643.0
• 申請(qǐng)日: 2020-06-09
• 公開(kāi)（公告）號(hào): CN111695622B
• 公開(kāi)（公告）日: 2023-08-11
• 發(fā)明（設(shè)計(jì)）人: 于海;彭林;錢(qián)堃;李凱;徐敏;王剛;鮑興川;侯戰(zhàn)勝;王鶴;劉睿;朱亮;韓海韻;何志敏;劉偉;孫蓉;邵劍
• 申請(qǐng)（專(zhuān)利權(quán)）人: 全球能源互聯(lián)網(wǎng)研究院有限公司;國(guó)網(wǎng)江蘇省電力有限公司電力科學(xué)研究院;國(guó)家電網(wǎng)有限公司;東南大學(xué)
• 主分類(lèi)號(hào): G06V10/774
• 分類(lèi)號(hào): G06V10/774;G06V10/764;G06V10/82;G06N3/08;G06Q50/06
• 代理公司: 北京三聚陽(yáng)光知識(shí)產(chǎn)權(quán)代理有限公司 11250
• 代理人: 李博洋

本發(fā)明公開(kāi)了一種變電作業(yè)場(chǎng)景的標(biāo)識(shí)模型訓(xùn)練方法、標(biāo)識(shí)方法及裝置，其中，變電作業(yè)場(chǎng)景的標(biāo)識(shí)方法包括：采集待測(cè)區(qū)域中不同子區(qū)域的連續(xù)圖像，建立圖像數(shù)據(jù)集，從圖像數(shù)據(jù)集中提取關(guān)鍵幀圖像，并根據(jù)關(guān)鍵幀圖像進(jìn)行目標(biāo)檢測(cè)，獲取關(guān)鍵幀圖像的物體信息；對(duì)關(guān)鍵幀圖像進(jìn)行圖像分類(lèi)，確定各子區(qū)域的關(guān)鍵幀圖像的場(chǎng)景信息；根據(jù)物體信息及場(chǎng)景信息確定待測(cè)區(qū)域的物體特征、場(chǎng)景特征及歷史場(chǎng)景特征；根據(jù)物體特征、場(chǎng)景特征及歷史場(chǎng)景特征及預(yù)設(shè)的場(chǎng)景標(biāo)識(shí)模型進(jìn)行場(chǎng)景標(biāo)識(shí)，生成目標(biāo)場(chǎng)景信息。通過(guò)實(shí)施本發(fā)明，避免了因單一信息來(lái)源而導(dǎo)致場(chǎng)景誤分類(lèi)，提高了場(chǎng)景識(shí)別的準(zhǔn)確性。

技術(shù)領(lǐng)域

本發(fā)明涉及電力技術(shù)領(lǐng)域，具體涉及一種變電作業(yè)場(chǎng)景的標(biāo)識(shí)模型訓(xùn)練方法、標(biāo)識(shí)方法及裝置。

背景技術(shù)

在變電站作業(yè)環(huán)境中，越來(lái)越復(fù)雜的變電設(shè)備和相互之間的邏輯關(guān)系、以及各種特定功能的區(qū)域，增加了作業(yè)人員的認(rèn)知負(fù)擔(dān)。現(xiàn)有技術(shù)中通常利用視覺(jué)SLAM技術(shù)對(duì)電力作業(yè)環(huán)境進(jìn)行掃描建模，得到整個(gè)環(huán)境空間的稠密地圖或稀疏地圖，然而其包含的粗略信息并不足以幫助作業(yè)人員判斷環(huán)境區(qū)域和掌控任務(wù)情勢(shì)。盡管通過(guò)電力巡檢機(jī)器人可以進(jìn)行環(huán)境區(qū)域識(shí)別，但是電力巡檢機(jī)器人僅能進(jìn)行環(huán)境區(qū)域識(shí)別而不能對(duì)環(huán)境區(qū)域進(jìn)行理解，導(dǎo)致電力巡檢機(jī)器人仍主要扮演環(huán)境監(jiān)測(cè)數(shù)據(jù)采集的角色，不具備根據(jù)任務(wù)和環(huán)境區(qū)域進(jìn)行自主推理規(guī)劃的能力，對(duì)于復(fù)雜變電作業(yè)環(huán)境則無(wú)法進(jìn)行準(zhǔn)確的場(chǎng)景識(shí)別。

發(fā)明內(nèi)容

本發(fā)明的主要目的在于提供一種變電作業(yè)場(chǎng)景的標(biāo)識(shí)模型訓(xùn)練方法、標(biāo)識(shí)方法及裝置，以解決現(xiàn)有技術(shù)中復(fù)雜變電作業(yè)環(huán)境下場(chǎng)景識(shí)別的準(zhǔn)確性不佳的問(wèn)題。

根據(jù)第一方面，本發(fā)明實(shí)施例提供了一種變電作業(yè)場(chǎng)景的標(biāo)識(shí)模型訓(xùn)練方法，包括以下步驟：采集目標(biāo)區(qū)域中不同子區(qū)域的連續(xù)圖像，建立圖像數(shù)據(jù)集，從所述圖像數(shù)據(jù)集中提取訓(xùn)練關(guān)鍵幀圖像，并根據(jù)所述訓(xùn)練關(guān)鍵幀圖像進(jìn)行目標(biāo)檢測(cè)，獲取所述訓(xùn)練關(guān)鍵幀圖像的訓(xùn)練物體信息；對(duì)所述訓(xùn)練關(guān)鍵幀圖像進(jìn)行圖像分類(lèi)，確定各所述子區(qū)域的所述訓(xùn)練關(guān)鍵幀圖像的訓(xùn)練場(chǎng)景信息；根據(jù)所述訓(xùn)練物體信息及訓(xùn)練場(chǎng)景信息確定所述目標(biāo)區(qū)域的物體特征、場(chǎng)景特征及歷史場(chǎng)景特征；根據(jù)所述物體特征、場(chǎng)景特征及歷史場(chǎng)景特征對(duì)第一神經(jīng)網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練，生成場(chǎng)景標(biāo)識(shí)模型。

結(jié)合第一方面，在第一方面的第一實(shí)施方式中，所述根據(jù)所述訓(xùn)練關(guān)鍵幀圖像進(jìn)行目標(biāo)檢測(cè)，獲取所述目標(biāo)區(qū)域中的所述訓(xùn)練關(guān)鍵幀圖像的訓(xùn)練物體信息，包括：獲取所述訓(xùn)練關(guān)鍵幀圖像中與所述目標(biāo)區(qū)域?qū)?yīng)的訓(xùn)練物體，確定所述訓(xùn)練物體的物體數(shù)據(jù)，生成物體數(shù)據(jù)文件；根據(jù)所述物體數(shù)據(jù)文件對(duì)第二神經(jīng)網(wǎng)絡(luò)模型進(jìn)行訓(xùn)練，得到目標(biāo)檢測(cè)模型；調(diào)用所述目標(biāo)檢測(cè)模型對(duì)所述訓(xùn)練關(guān)鍵幀圖像中的所述訓(xùn)練物體進(jìn)行識(shí)別，得到與所述訓(xùn)練物體對(duì)應(yīng)的所述訓(xùn)練物體信息。

結(jié)合第一方面第一實(shí)施方式，在第一方面的第二實(shí)施方式中，所述對(duì)所述訓(xùn)練關(guān)鍵幀圖像進(jìn)行圖像分類(lèi)，確定各所述子區(qū)域的所述訓(xùn)練關(guān)鍵幀圖像的訓(xùn)練場(chǎng)景信息，包括：獲取所述訓(xùn)練關(guān)鍵幀圖像中與所述目標(biāo)區(qū)域?qū)?yīng)的第一場(chǎng)景數(shù)據(jù)，對(duì)所述第一場(chǎng)景數(shù)據(jù)進(jìn)行訓(xùn)練，獲取訓(xùn)練后的第二場(chǎng)景數(shù)據(jù)；根據(jù)所述第二場(chǎng)景數(shù)據(jù)，對(duì)所述訓(xùn)練關(guān)鍵幀圖像進(jìn)行圖像分類(lèi)，得到與各所述子區(qū)域的所述訓(xùn)練關(guān)鍵幀圖像對(duì)應(yīng)的訓(xùn)練場(chǎng)景信息。

結(jié)合第一方面，在第一方面的第三實(shí)施方式中，所述根據(jù)所述訓(xùn)練物體信息及訓(xùn)練場(chǎng)景信息確定所述目標(biāo)區(qū)域的物體特征、場(chǎng)景特征及歷史場(chǎng)景特征，包括：以所述訓(xùn)練關(guān)鍵幀圖像作為節(jié)點(diǎn)，建立場(chǎng)景區(qū)域識(shí)別模型，所述場(chǎng)景區(qū)域識(shí)別模型包括多個(gè)節(jié)點(diǎn)；根據(jù)所述訓(xùn)練物體信息確定各節(jié)點(diǎn)對(duì)應(yīng)的所述目標(biāo)區(qū)域的物體特征；根據(jù)所述訓(xùn)練場(chǎng)景信息確定各節(jié)點(diǎn)對(duì)應(yīng)的所述目標(biāo)區(qū)域的場(chǎng)景特征；根據(jù)當(dāng)前節(jié)點(diǎn)對(duì)應(yīng)的所述目標(biāo)區(qū)域的場(chǎng)景特征以及前一節(jié)點(diǎn)對(duì)應(yīng)的所述目標(biāo)區(qū)域的場(chǎng)景特征確定所述目標(biāo)區(qū)域的歷史場(chǎng)景特征。