[發明專利]一種螺栓松動檢測方法及裝置

在審

• 申請號: 202210279968.7
• 申請日: 2022-03-22
• 公開（公告）號: CN114387268A
• 公開（公告）日: 2022-04-22
• 發明（設計）人: 周登科;鄒祖冰;史凱特;湯鵬;于傲
• 申請（專利權）人: 中國長江三峽集團有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06T7/70;G06V10/25;G06V10/26;G06V10/44;G06V10/82;G06N3/04
• 代理公司: 北京三聚陽光知識產權代理有限公司 11250
• 代理人: 李博洋

1.一種螺栓松動檢測方法，其特征在于，包括：

獲取待檢測螺栓的二維圖像數據和深度圖像數據；

根據所述二維圖像數據識別所述待檢測螺栓的各邊緣相對于水平線的測量平均角度；

將所述深度圖像數據中的像素點與所述二維圖像數據中的像素點進行匹配，得到像素點匹配結果，并根據所述像素點匹配結果以及待檢測螺栓在所述二維圖像數據中的位置，在所述深度圖像數據中確定待檢測螺栓所在區域；

根據所述深度圖像數據中待檢測螺栓所在區域的像素點計算所述待檢測螺栓的測量距離；

將所述測量平均角度和所述測量距離分別與所述待檢測螺栓在初始狀態下的初始平均角度和初始測量距離進行比較，若所述測量平均角度與所述初始平均角度的絕對差值大于第一預設值，和/或，所述測量距離與所述初始測量距離的絕對差值大于第二預設值，判定所述待檢測螺栓處于松動狀態。

2.根據權利要求1所述的螺栓松動檢測方法，其特征在于，根據所述二維圖像數據識別所述待檢測螺栓的各邊緣相對于水平線的測量平均角度，包括：

將所述二維圖像數據輸入至預先訓練的螺栓分割模型中，識別所述二維圖像數據中的待檢測螺栓，并對所述二維圖像數據中的待檢測螺栓進行分割，得到所述待檢測螺栓的掩膜區域；

對所述待檢測螺栓的掩膜區域進行邊緣檢測，并檢測待檢測螺栓的邊緣直線，得到所述待檢測螺栓各邊的邊緣直線方程；

根據各所述邊緣直線方程與所述二維圖像數據的圖像像素坐標系x軸正方向之間的夾角，計算所述待檢測螺栓的各邊緣相對于水平線的測量平均角度。

3.根據權利要求2所述的螺栓松動檢測方法，其特征在于，還包括：

所述螺栓分割模型通過對改進的Mask RCNN模型進行訓練得到；

所述改進的Mask RCNN模型包括全卷積網絡、特征金字塔網絡、區域建議網絡；

所述特征金字塔網絡包括至少一個金字塔層，每個金字塔層連接有一個空洞卷積層，所述空洞卷積層包含多種不同擴張率的空洞卷積核；所述全卷積網絡中包括多個卷積層和池化層；

所述全卷積網絡中使用的卷積層使用多種不同擴張率的空洞卷積核；

所述區域建議網絡包含不同尺寸的錨點框；

所述區域建議網絡使用非極大值抑制方法篩選感興趣區域。