[發明專利]一種用于風機圖像故障標識的候選框調整方法

在審

• 申請號: 202211153917.6
• 申請日: 2022-09-21
• 公開（公告）號: CN115661685A
• 公開（公告）日: 2023-01-31
• 發明（設計）人: 楊蘋;張淼;王仁杰;劉澤健;范紫微
• 申請（專利權）人: 華南理工大學;深圳華工能源技術有限公司
• 主分類號: G06V20/17
• 分類號: G06V20/17;G06V10/25;G06V10/46;G06V10/50;G06V10/764;G06V10/774
• 代理公司: 廣州科峻專利代理事務所(普通合伙) 44445
• 代理人: 唐海斐

1.一種用于風機圖像故障標識的候選框調整方法，其特征在于，所述風機圖像包括可見光圖像和紅外熱圖像，所述方法包括以下步驟：

S1、候選框坐標變換：基于傳統圖像識別算法得到候選框集合B，設計坐標變換矩陣和變換公式c_i＝b_i*a_4*4，將其變換為集合C；其中，B＝{b_i}，b_i＝(x_i,y_i,w_i,h_i)，(x_i,y_i)為候選框b_i中心點的直角坐標，(w_i,h_i)為b_i候選框的長和寬；C＝{c_i}，c_i＝(c_i1,c_i2,c_i3,c_i4)，(c_i1,c_i2)為候選框c_i左上角的直角坐標，(c_i3,c_i4)為候選框c_i右下角的直角坐標；

S2、調整參數a_ki計算：基于傳統圖像識別算法中的NMS，設計候選框的調整參數a_ki(g_k,c_i)＝relu(s_k+s_i-1-GIOU(g_k,c_i))*((c_i1-g_k1),(c_i2-g_k2),(c_i3-c_k3),(c_i4-g_k4))，a_ki為四維向量，s為候選框的置信分數，候選框g_k＝(g_k1,g_k2,g_k3,g_k4)，(g_k1,g_k2)為候選框g_k左上角的直角坐標，(g_k3,g_k4)為候選框g_k右下角的直角坐標。

S3、候選框g_k調整：候選框調整公式為為兩個四維向量的點乘，α為經驗調節系數，A_4*4為交叉矩陣；

S4、可見光圖像和紅外熱圖像候選框互補：對比兩種圖像的故障候選框，在可見光圖像中，在沒有被可見光圖像候選框覆蓋而被紅外熱圖像候選框覆蓋的地方添加候選框；在紅外熱圖像中，在沒有被紅外熱圖像候選框覆蓋而被可見光圖像候選框覆蓋的地方添加候選框。

2.根據權利要求1所述的一種用于風機圖像故障標識的候選框調整方法，其特征在于，在步驟S1中所述的傳統圖像識別算法的步驟包括圖像去模糊、增強和去噪，滑動窗口法選取候選框，HOG特征提取和SVM分類。

3.根據權利要求1所述的一種用于風機圖像故障標識的候選框調整方法，其特征在于，在步驟S2所述的a_ki的計算過程為：將集合C中置信分數最高的候選框c_j放入集合G中并標記為g_k，刪去集合C中的c_j且計算候選框g_k與集合C中剩余候選框c_i的GIOU(g_k,c_i)，若GIOU(g_k,c_i)≥0.5，則刪去集合C中的c_i且計算調整參數a_ki(g_k,c_i)，重復此步驟直至集合其中，GIOU的計算公式為relu的計算公式為