[發(fā)明專利]一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法

在審

• 申請?zhí)枺?/td>: 201910971363.2
• 申請日: 2019-10-14
• 公開（公告）號(hào): CN110689148A
• 公開（公告）日: 2020-01-14
• 發(fā)明（設(shè)計(jì)）人: 張秋雁;張俊瑋;丁超;黎世華;王鐸潤;王藍(lán)苓;李航峰;高承貴;張海永;錢威;張馳;黃宸希
• 申請（專利權(quán)）人: 貴州電網(wǎng)有限責(zé)任公司
• 主分類號(hào): G06Q10/00
• 分類號(hào): G06Q10/00;G06F16/33;G06K9/00;G06K9/62;G01R35/04
• 代理公司: 52100 貴陽中新專利商標(biāo)事務(wù)所
• 代理人: 胡緒東

1.一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：該方法包括以下步驟：

（1）離線構(gòu)建圖像識(shí)別引擎：采集5000張以上現(xiàn)場設(shè)備圖像素材標(biāo)記特征，使用YOLO算法訓(xùn)練計(jì)量設(shè)備圖像識(shí)別模型；

（2）離線構(gòu)建故障診斷專家知識(shí)庫：根據(jù)電力設(shè)備運(yùn)維作業(yè)的標(biāo)準(zhǔn)化及安全性要求，建立低壓集抄計(jì)量終端SOP標(biāo)準(zhǔn)化知識(shí)庫；

（3）使用雙目分體機(jī)AR眼鏡采集計(jì)量設(shè)備圖像數(shù)據(jù)、運(yùn)維人員現(xiàn)場語音數(shù)據(jù)；

（4）上傳步驟（3）中數(shù)據(jù)到web運(yùn)維云服務(wù)器；

（5）采用ffmpeg解碼程序?qū)鞯皆品?wù)器上的視頻流分解成一張張圖片，調(diào)用圖像識(shí)別引擎，識(shí)別設(shè)備型號(hào)和設(shè)備指示燈，得到故障類型；

（6）調(diào)用百度語音識(shí)別API，將語音轉(zhuǎn)換為文本，分詞后，逐詞同故障關(guān)鍵詞名單匹配，查詢故障代碼；

（7）由步驟（5）和步驟（6）得到的故障類型，在故障診斷專家知識(shí)庫中檢索故障處置方法；

（8）通過AR眼鏡與現(xiàn)場運(yùn)維人員交互，將步驟（7）得到的故障處置方法疊加到現(xiàn)實(shí)場景中，引導(dǎo)現(xiàn)場運(yùn)維人員對(duì)故障進(jìn)行排查。

2.根據(jù)權(quán)利要求1所述的一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：步驟（1）中圖像識(shí)別引擎構(gòu)建方法：通過圖像深度學(xué)習(xí)訓(xùn)練工具導(dǎo)入大量的現(xiàn)場設(shè)備圖像素材，圖像素材包括現(xiàn)場設(shè)備正常運(yùn)行和各種故障狀態(tài)的圖片素材，對(duì)每張圖片進(jìn)行標(biāo)記特征，每張圖片的特征包括廠家名稱、型號(hào)、電源燈、運(yùn)行燈、液晶屏幕和條形碼，構(gòu)建計(jì)量設(shè)備圖像識(shí)別模型。

3.根據(jù)權(quán)利要求1所述的一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：步驟（2）低壓集抄計(jì)量終端SOP標(biāo)準(zhǔn)化知識(shí)庫的知識(shí)用一組規(guī)則來表達(dá)，即設(shè)備故障滿足條件時(shí)反饋對(duì)應(yīng)的故障處置方法。

4.根據(jù)權(quán)利要求1所述的一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：步驟（4）中雙目分體機(jī)AR眼鏡過 USB 數(shù)據(jù)線插入具有 USB 通訊接口的便攜式終端，便攜式終端使用4G網(wǎng)絡(luò)傳輸現(xiàn)場數(shù)據(jù)到web運(yùn)維云服務(wù)器。

5.根據(jù)權(quán)利要求1所述的一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：步驟（5）中圖像識(shí)別分析計(jì)量設(shè)備圖像后，量化定義識(shí)別結(jié)果，每種故障均對(duì)應(yīng)一個(gè)故障代碼。

6.根據(jù)權(quán)利要求1所述的一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：步驟（5）中圖像識(shí)別若未識(shí)別出故障內(nèi)容，將當(dāng)前識(shí)別的圖像添加到計(jì)量圖像識(shí)別訓(xùn)練數(shù)據(jù)庫中。

7.根據(jù)權(quán)利要求1所述的一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：步驟（6）中由百度語音識(shí)別API的語音識(shí)別結(jié)果關(guān)鍵字檢索故障代碼，當(dāng)圖像識(shí)別無法定位具體故障時(shí)，使用語音識(shí)別檢測出的故障代碼。

8.根據(jù)權(quán)利要求1所述的一種基于AR技術(shù)的計(jì)量設(shè)備故障檢測方法，其特征在于：步驟（7）中若未檢索到故障處置方法，更新專家知識(shí)庫，添加新的故障處置規(guī)則。