[發明專利]一種基于殘差的貼片圖像增強識別方法及裝置

在審

• 申請號: 202011488963.2
• 申請日: 2020-12-16
• 公開（公告）號: CN112508789A
• 公開（公告）日: 2021-03-16
• 發明（設計）人: 周海威
• 申請（專利權）人: 廣州佳帆計算機有限公司
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T7/00
• 代理公司: 北京澤方譽航專利代理事務所(普通合伙) 11884
• 代理人: 陳照輝

本申請實施例公開了一種基于殘差的貼片圖像增強識別方法及裝置。本申請實施例提供的技術方案，通過獲取圖像樣本，基于圖像樣本構建殘差樣本，并基于殘差樣本通過卷積神經網絡訓練得到殘差網絡模型，提取圖像傳感器實時采集的貼片圖像，將貼片圖像輸入殘差網絡模型，基于殘差網絡模型對貼片圖像進行重建得到對應的增強圖像，基于增強圖像進行貼片檢測識別，輸出對應的貼片檢測結果。采用上述技術手段，通過對貼片圖像進行有效增強，提升貼片圖像的分辨率，進而提升貼片圖像識別檢測效率和準確率，優化識別檢測效果。并且，本申請實施例通過第二深度神經網絡模型驗證貼片檢測結果，可以進一步提升貼片檢測識別精度，優化貼片誤差識別效果。

技術領域

本申請實施例涉及貼片機技術領域，尤其涉及一種基于殘差的貼片圖像增強識別方法及裝置。

背景技術

目前，貼片機是SMT(表面貼裝技術)的生產線中的主要設備，也是整個SMT生產中最關鍵、最復雜的設備。貼片機在貼放元器件時，為了確保元器件貼放的精準度，通常會通過人工或者圖像處理技術定位貼片位置，以此來確保元器件貼片的精準度。

但是，由于貼片機要處理的元器件封裝形式多種多樣，各種元器件在外形和大小上存在差異，通過人工定位貼片容易引起定位誤差，而圖像處理的方式又容易受圖像質量的影響，進而影響貼片機的貼片精度，導致貼片效果相對偏差。

發明內容

本申請實施例提供一種基于殘差的貼片圖像增強識別方法及裝置，能夠對采集的貼片圖像進行有效增強，提升貼片圖像識別檢測效率和準確率，優化識別檢測效果。

在第一方面，本申請實施例提供了一種基于殘差的貼片圖像增強識別方法，包括：

獲取圖像樣本，所述圖像樣本包括對應不同拍攝條件拍攝貼片作業的第一圖像樣本和對應的第二圖像樣本；

基于所述圖像樣本構建殘差樣本，并基于所述殘差樣本通過卷積神經網絡訓練得到殘差網絡模型；

提取圖像傳感器實時采集的貼片圖像，將所述貼片圖像輸入所述殘差網絡模型，基于所述殘差網絡模型對所述貼片圖像進行重建得到對應的增強圖像；

基于所述增強圖像進行貼片檢測識別，輸出對應的貼片檢測結果。

進一步的，基于所述圖像樣本構建殘差樣本，包括：

將所述第一圖像樣本分解成對應不同方向分量的多個子圖像；

根據所述子圖像和所述第二圖像樣本計算得到對應的殘差圖像；

以各個所述殘差圖像構建殘差樣本，所述殘差圖像表示所述子圖像與所述第二圖像樣本在對應方向分量的差異。

進一步的，所述殘差圖像的計算公式為：

p_i＝y_i-x

其中，y_i為所述第一圖像樣本的第i個子圖像，x為所述第二圖像樣本，p_i為對應的殘差圖像。

進一步的，基于所述殘差樣本通過卷積神經網絡訓練得到殘差網絡模型，包括：

基于所述殘差樣本訓練所述殘差網絡模型的模型參數，并根據所述模型參數確定所述殘差網絡模型的目標訓練函數。

進一步的，基于所述殘差網絡模型對所述貼片圖像進行重建得到對應的增強圖像，包括：

基于所述殘差網絡模型計算所述貼片圖像所對應的貼片殘差圖像；

根據所述貼片殘差圖像計算獲得對應的貼片子圖像，并將所述貼片子圖像進行空間位置變換重建對應的增強圖像。

進一步的，基于所述增強圖像進行貼片檢測識別，輸出對應的貼片檢測結果，包括：