[發明專利]一種鼠標外殼表面缺陷檢測方法及裝置、系統、電子設備

在審

• 申請號: 202210219815.3
• 申請日: 2022-03-08
• 公開（公告）號: CN114612418A
• 公開（公告）日: 2022-06-10
• 發明（設計）人: 謝豐凡;邱翌;王東明;盧星宇
• 申請（專利權）人: 寧波利安科技股份有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06T7/586;G06T5/00;G06T5/30;G06T7/187;G06V10/141;G06V10/764;G06V10/80;G06K9/62;G06N20/00
• 代理公司: 杭州求是專利事務所有限公司 33200
• 代理人: 應孔月

1.一種鼠標外殼表面缺陷檢測方法，其特征在于，包括：

獲取待測鼠標外殼的圖像，其中所述圖像包括所述待測鼠標外殼的頂部的圖像、四個側面的圖像以及底部的圖像；

對所述圖像進行預處理；

將預處理后的圖像輸入訓練好的缺陷檢測模型中，得到初步檢測結果；

對所述初步檢測結果進行非極大抑制操作，得到缺陷檢測結果。

2.根據權利要求1所述的方法，其特征在于，對所述圖像進行預處理，包括：

對所述圖像進行形態學濾波操作，得到鼠標外殼區域；

對所述鼠標外殼區域進行銳化，以提高所述鼠標外殼區域的對比度。

3.根據權利要求1所述的方法，其特征在于，所述缺陷檢測模型包括：

特征提取網絡，用于提取輸入圖像的特征；

特征融合網絡，用于融合所述特征提取網絡輸出的不同尺度、不同層次的特征，得到融合特征；及

檢測分類網絡，用于從所述融合特征中識別出目標缺陷的位置和類別。

4.根據權利要求1所述的方法，其特征在于，所述缺陷檢測模型的訓練過程包括：

獲取鼠標外殼的圖像集；

對所述圖像集中的所有圖像進行檢測框標注和數據增強，得到訓練數據集，其中每個檢測框包括缺陷的位置信息和類別信息；

將所述訓練數據集劃分為訓練集和驗證集；

在所述訓練集中的一張圖像上預設的若干候選框進行篩選，得到正樣本框和負樣本框；

根據所述正樣本框與所述檢測框的重合程度，計算位置損失函數；

根據正樣本框對應的檢測框的類別信息，計算類別損失函數；

根據所述正樣本框、負樣本框分別對應的置信度信息，計算置信度損失函數；

對所述位置損失函數、類別損失函數和置信度損失函數求加權和，得到損失值，生成策略梯度；

根據所述策略梯度，基于反向傳播算法逐層更新所述缺陷檢測模型的參數；

對所述訓練集中的其他圖像執行從在所述訓練集中的一張圖像上預設的若干候選框進行篩選，得到正樣本框和負樣本框至根據所述策略梯度，基于反向傳播算法逐層更新所述缺陷檢測模型的參數的步驟；

將驗證集輸入更新后的缺陷檢測模型中，計算驗證集的平均損失；

對在所述訓練集中的一張圖像上預設的若干候選框進行篩選，得到正樣本框和負樣本框至將驗證集輸入更新后的缺陷檢測模型中，計算驗證集的平均損失的步驟進行重復直至所述驗證集的損失不再降低。

5.一種鼠標外殼表面缺陷檢測裝置，其特征在于，包括：

獲取模塊，用于獲取待測鼠標外殼的圖像，其中所述圖像為帶偏振光的多光源多相機視覺系統對所述待測鼠標外殼的各個面進行圖像采集得到；

預處理模塊，用于對所述圖像進行預處理；

輸入模塊，用于將預處理后的圖像輸入訓練好的缺陷檢測模型中，得到初步檢測結果；

后處理模塊，用于對所述初步檢測結果進行非極大抑制操作，得到缺陷檢測結果。

6.一種鼠標外殼表面缺陷檢測系統，其特征在于，包括：

圖像采集單元，所述圖像采集單元用于采集待測鼠標外殼的圖像，其中所述圖像包括所述待測鼠標外殼的頂部的圖像、四個側面的圖像以及底部的圖像；

打光單元，所述打光單元用于在所述圖像采集單元進行圖像采集時進行光線照射；及

處理器，所述處理器用于獲取待測鼠標外殼的圖像，對所述圖像進行預處理，將預處理后的圖像輸入訓練好的缺陷檢測模型中，得到初步檢測結果，對所述初步檢測結果進行非極大抑制操作，得到缺陷檢測結果。

7.根據權利要求6所述的系統，其特征在于，所述圖像采集單元包括：

第一相機和第二相機，所述第一相機和第二相機用于從不同角度采集所述待測鼠標外殼的頂部的圖像；

第三相機、第四相機、第五相機和第六相機，所述第三相機、第四相機、第五相機和第六相機用于采集所述待測鼠標外殼的四個側面的圖像；

第七相機，所述第七相機用于采集所述待測鼠標外殼的底部的圖像。