[發(fā)明專利]檢測產(chǎn)品缺陷的方法和裝置

在審

• 申請?zhí)枺?/td>: 201910629293.2
• 申請日: 2019-07-12
• 公開（公告）號: CN112288676A
• 公開（公告）日: 2021-01-29
• 發(fā)明（設計）人: 劉威;孫俊;于小億
• 申請（專利權）人: 富士通株式會社
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06K9/32
• 代理公司: 北京集佳知識產(chǎn)權代理有限公司 11227
• 代理人: 杜誠;劉敏

公開了檢測產(chǎn)品缺陷的方法和裝置。一種在工業(yè)流水線上自動檢測產(chǎn)品缺陷的方法，包括：獲取待檢測產(chǎn)品的第一圖像，該第一圖像包括產(chǎn)品的多個特征部；對第一圖像進行變換以獲得第二圖像，在第二圖像中多個特征部呈線性排列；利用卷積神經(jīng)網(wǎng)絡基于第二圖像獲得特征圖，并且將特征圖轉(zhuǎn)換為熱力圖；從熱力圖中識別缺陷，并且在第二圖像中多個特征部的線性排列中確定與所識別的缺陷對應的位置；以及基于該位置在第一圖像中確定存在缺陷的特征部。

技術領域

本發(fā)明涉及用于檢測產(chǎn)品缺陷的方法和裝置，更具體地，涉及在工業(yè)流水線上自動檢測產(chǎn)品缺陷的方法和裝置。

背景技術

傳統(tǒng)的產(chǎn)品外觀缺陷檢測往往由人工完成，但人工檢測效率低，漏檢率高，并且成本不斷上升，因此嚴重地制約產(chǎn)能。對此已經(jīng)開發(fā)出一些自動化檢測技術，例如基于機器視覺的檢測技術。相比于人工檢測，自動檢測具有效率高、操作自動化、準確率高等優(yōu)點。

現(xiàn)有的自動檢測技術通常通過對產(chǎn)品外觀的圖像進行圖像處理來檢測缺陷。然而，存在著一些產(chǎn)品的外觀比較復雜或特殊而導致無法使用常規(guī)的圖像處理、模板匹配等方法的情況。

發(fā)明內(nèi)容

本發(fā)明提供了一種產(chǎn)品外觀缺陷自動檢測方案，其具有效率高、準確率高、節(jié)省人力成本等優(yōu)點。此外特別地，本發(fā)明能夠應用于利用常規(guī)技術無法進行檢測的特殊產(chǎn)品。

根據(jù)本發(fā)明的第一方面，提供了一種在工業(yè)流水線上自動檢測產(chǎn)品缺陷的方法，包括：獲取待檢測的產(chǎn)品的第一圖像，所述第一圖像包括所述產(chǎn)品的多個特征部；對所述第一圖像進行變換以獲得第二圖像，在所述第二圖像中，所述多個特征部呈線性排列；利用卷積神經(jīng)網(wǎng)絡基于所述第二圖像獲得特征圖，并且將所述特征圖轉(zhuǎn)換為熱力圖；從所述熱力圖中識別缺陷，并且在所述第二圖像中所述多個特征部的線性排列中確定與所識別的缺陷對應的位置；以及基于所述位置在所述第一圖像中確定存在缺陷的特征部。

根據(jù)本發(fā)明的第一方面，還提供了一種在工業(yè)流水線上自動檢測產(chǎn)品缺陷的方法，包括：獲取待檢測的產(chǎn)品的圖像，所述圖像至少包括所述產(chǎn)品的一個表面；利用卷積神經(jīng)網(wǎng)絡基于所述圖像獲得特征圖，并且將所述特征圖轉(zhuǎn)換為熱力圖；從所述熱力圖中識別缺陷，并且在所述圖像中確定與所識別的缺陷對應的位置；確定在所述位置處所述產(chǎn)品的所述一個表面存在缺陷。

根據(jù)本發(fā)明的第二方面，提供了一種用于在工業(yè)流水線上自動檢測產(chǎn)品缺陷的裝置，包括：存儲器，以及一個或多個處理器，所述處理器被配置為：獲取待檢測的產(chǎn)品的第一圖像，所述第一圖像包括所述產(chǎn)品的多個特征部；對所述第一圖像進行變換以獲得第二圖像，在所述第二圖像中，所述多個特征部呈線性排列；利用卷積神經(jīng)網(wǎng)絡基于所述第二圖像獲得特征圖，并且將所述特征圖轉(zhuǎn)換為熱力圖；從所述熱力圖中識別缺陷，并且在所述第二圖像中所述多個特征部的線性排列中確定與所識別的缺陷對應的位置；以及基于所述位置在所述第一圖像中確定存在缺陷的特征部。

根據(jù)本發(fā)明的第二方面，還提供了一種用于在工業(yè)流水線上自動檢測產(chǎn)品缺陷的裝置，包括：存儲器，以及一個或多個處理器，所述處理器被配置為：獲取待檢測的產(chǎn)品的圖像，所述圖像至少包括所述產(chǎn)品的一個表面；利用卷積神經(jīng)網(wǎng)絡基于所述圖像獲得特征圖，并且將所述特征圖轉(zhuǎn)換為熱力圖；從所述熱力圖中識別缺陷，并且在所述圖像中確定與所識別的缺陷對應的位置；確定在所述位置處所述產(chǎn)品的所述一個表面存在缺陷。

根據(jù)本發(fā)明的第三方面，提供了一種存儲有程序的記錄介質(zhì)，所述程序在被計算機執(zhí)行時，使得計算機實現(xiàn)如上所述的方法。

附圖說明

圖1A示出了作為產(chǎn)品的一個示例的轉(zhuǎn)向器的立體圖，圖1B示出了轉(zhuǎn)向器的頂視圖。

圖2示出了根據(jù)本發(fā)明第一實施例的產(chǎn)品缺陷檢測方法的總體流程圖。

圖3A示出了對圖1B中的圖像進行變換后得到的圖像，圖3B是圖3A的局部放大圖。

圖4示出了基于圖3A中的圖像而獲得的熱力圖。