[發(fā)明專利]圖像判定裝置、圖像判定方法及圖像判定程序

在審

• 申請(qǐng)?zhí)枺?/td>: 201980052353.7
• 申請(qǐng)日: 2019-11-14
• 公開（公告）號(hào): CN112534472A
• 公開（公告）日: 2021-03-19
• 發(fā)明（設(shè)計(jì)）人: 土屋直樹;井尻善久;丸山裕;大川洋平;林剣之介;山元左近
• 申請(qǐng)（專利權(quán)）人: 歐姆龍株式會(huì)社
• 主分類號(hào): G06T7/00
• 分類號(hào): G06T7/00
• 代理公司: 北京同立鈞成知識(shí)產(chǎn)權(quán)代理有限公司 11205
• 代理人: 楊貝貝;臧建明

本發(fā)明提供一種圖像判定裝置等，即便在進(jìn)行學(xué)習(xí)模型的追加學(xué)習(xí)的情況下，也明確由學(xué)習(xí)模型的何種變更導(dǎo)致判定結(jié)果變化。圖像判定裝置包括：一個(gè)或多個(gè)特征提取器，分別基于檢查對(duì)象的圖像而輸出表示圖像的特定特征的特征數(shù)據(jù)；第一學(xué)習(xí)部，使第一判定器以下述方式進(jìn)行學(xué)習(xí)，即，基于將第一學(xué)習(xí)圖像輸入至一個(gè)或多個(gè)特征提取器時(shí)輸出的第一特征數(shù)據(jù)，輸出表示與第一學(xué)習(xí)圖像關(guān)聯(lián)的第一標(biāo)簽數(shù)據(jù)的第一輸出數(shù)據(jù)；第二學(xué)習(xí)部，使第二判定器以下述方式進(jìn)行學(xué)習(xí)，即，基于將第二學(xué)習(xí)圖像輸入至一個(gè)或多個(gè)特征提取器時(shí)輸出的第二特征數(shù)據(jù)，輸出表示與第二學(xué)習(xí)圖像關(guān)聯(lián)的第二標(biāo)簽數(shù)據(jù)的第二輸出數(shù)據(jù)；以及輸出部，基于第一輸出數(shù)據(jù)及第二輸出數(shù)據(jù)，輸出表示與圖像有關(guān)的綜合判定結(jié)果的輸出數(shù)據(jù)。

技術(shù)領(lǐng)域

本發(fā)明涉及一種圖像判定裝置、圖像判定方法及圖像判定程序。

背景技術(shù)

以往，在工廠自動(dòng)化(Factory Automation，F(xiàn)A)領(lǐng)域中，將使用圖像處理的自動(dòng)控制廣泛地加以實(shí)用。例如，已實(shí)現(xiàn)如下工序：拍攝工件等檢查對(duì)象，基于從所述拍攝的圖像中提取的特征量，檢查所述工件是否良好。

例如專利文獻(xiàn)1中公開了下述裝置，此裝置使用識(shí)別器的輸出結(jié)果來判定檢查對(duì)象有無缺陷，所述識(shí)別器將在多個(gè)拍攝條件下拍攝的檢查對(duì)象的圖像用于學(xué)習(xí)用數(shù)據(jù)進(jìn)行了學(xué)習(xí)。具體而言，專利文獻(xiàn)1所記載的裝置具有：學(xué)習(xí)用提取部件，從至少兩個(gè)圖像中分別提取所述圖像的特征量，所述至少兩個(gè)圖像基于在至少兩個(gè)不同的拍攝條件下對(duì)已知外觀是否良好的對(duì)象物進(jìn)行拍攝所得的圖像；選擇部件，從涵蓋由所述學(xué)習(xí)用提取部件從所述至少兩個(gè)圖像中提取的特征量的、特征量中，選擇用于判定對(duì)象物是否良好的特征量；以及生成部件，基于由所述選擇部件所選擇的所述特征量，生成判定對(duì)象物是否良好的識(shí)別器。

現(xiàn)有技術(shù)文獻(xiàn)

專利文獻(xiàn)

專利文獻(xiàn)1：日本專利特開2017-49974號(hào)公報(bào)

發(fā)明內(nèi)容

發(fā)明所要解決的問題

在根據(jù)檢查對(duì)象的圖像通過學(xué)習(xí)模型來進(jìn)行缺陷有無或工件種類等的判定的情況下，有時(shí)使用新獲取的圖像或由學(xué)習(xí)模型進(jìn)行了錯(cuò)誤判定的圖像來進(jìn)行學(xué)習(xí)模型的追加學(xué)習(xí)。但是，若通過追加學(xué)習(xí)來更新學(xué)習(xí)模型的任意參數(shù)，則有時(shí)不明確通過追加學(xué)習(xí)對(duì)學(xué)習(xí)模型的何種部分施加了變更，而無法說明由學(xué)習(xí)模型的何種變更導(dǎo)致判定結(jié)果變化。

因此，本發(fā)明提供一種圖像判定裝置、圖像判定方法及圖像判定程序，即便在進(jìn)行學(xué)習(xí)模型的追加學(xué)習(xí)的情況下，也明確由學(xué)習(xí)模型的何種變更導(dǎo)致判定結(jié)果變化。

解決問題的技術(shù)手段

本公開的一實(shí)施例的圖像判定裝置包括：一個(gè)或多個(gè)特征提取器，分別基于檢查對(duì)象的圖像而輸出表示圖像的特定特征的特征數(shù)據(jù)；第一判定器，基于從一個(gè)或多個(gè)特征提取器輸出的特征數(shù)據(jù)，輸出表示與圖像有關(guān)的判定結(jié)果的第一輸出數(shù)據(jù)；第二判定器，基于從一個(gè)或多個(gè)特征提取器輸出的特征數(shù)據(jù)，輸出表示與圖像有關(guān)的判定結(jié)果的第二輸出數(shù)據(jù)；第一學(xué)習(xí)部，使用包含第一學(xué)習(xí)圖像及第一標(biāo)簽數(shù)據(jù)的學(xué)習(xí)數(shù)據(jù)，使第一判定器以下述方式進(jìn)行學(xué)習(xí)，即，基于將第一學(xué)習(xí)圖像輸入至一個(gè)或多個(gè)特征提取器時(shí)輸出的第一特征數(shù)據(jù)，輸出表示與第一學(xué)習(xí)圖像關(guān)聯(lián)的第一標(biāo)簽數(shù)據(jù)的第一輸出數(shù)據(jù)；第二學(xué)習(xí)部，在追加了包含第二學(xué)習(xí)圖像及第二標(biāo)簽數(shù)據(jù)的新的學(xué)習(xí)數(shù)據(jù)的情況下，使第二判定器以下述方式進(jìn)行學(xué)習(xí)，即，基于將第二學(xué)習(xí)圖像輸入至一個(gè)或多個(gè)特征提取器時(shí)輸出的第二特征數(shù)據(jù)，輸出表示與第二學(xué)習(xí)圖像關(guān)聯(lián)的第二標(biāo)簽數(shù)據(jù)的第二輸出數(shù)據(jù)；以及輸出部，基于第一輸出數(shù)據(jù)及第二輸出數(shù)據(jù)，輸出表示與圖像有關(guān)的綜合判定結(jié)果的輸出數(shù)據(jù)，所述第一輸出數(shù)據(jù)是由第一判定器基于將圖像輸入至一個(gè)或多個(gè)特征提取器時(shí)輸出的特征數(shù)據(jù)而輸出，所述第二輸出數(shù)據(jù)是由第二判定器基于將圖像輸入至一個(gè)或多個(gè)特征提取器時(shí)輸出的特征數(shù)據(jù)而輸出。

根據(jù)所述實(shí)施例，通過追加學(xué)習(xí)而新生成第二判定器并追加，并將第一判定器及第二判定器作出的判定綜合，由此即便在進(jìn)行學(xué)習(xí)模型的追加學(xué)習(xí)的情況下，也明確由學(xué)習(xí)模型的何種變更導(dǎo)致判定結(jié)果變化。