[發(fā)明專利]融合智能檢測與自動化測試的圖像數(shù)據(jù)處理系統(tǒng)與方法

在審

• 申請?zhí)枺?/td>: 202011247432.4
• 申請日: 2020-11-10
• 公開（公告）號: CN112347947A
• 公開（公告）日: 2021-02-09
• 發(fā)明（設(shè)計）人: 蔡鵬羽;李素兵
• 申請（專利權(quán)）人: 廈門長江電子科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62
• 代理公司: 廈門荔信航知專利代理事務(wù)所(特殊普通合伙) 35247
• 代理人: 蘇娟

本發(fā)明提出融合智能檢測與自動化測試的圖像數(shù)據(jù)處理系統(tǒng)與方法。所述方法包括步驟S100：初始化前端圖像檢測系統(tǒng)的各項參數(shù)；S200：使用前端圖像檢測系統(tǒng)獲取目標(biāo)對象的采樣圖像；S300：使用圖像識別模型對所述采樣圖像進(jìn)行目標(biāo)識別，判斷目標(biāo)識別結(jié)果是否存在異常；S400：將所述目標(biāo)識別結(jié)果以及所述采樣圖像發(fā)送給后端控制平臺；S500：接收所述后端控制平臺的反饋信息，根據(jù)所述反饋信息對所述圖像識別模型進(jìn)行訓(xùn)練和更新；S600：響應(yīng)于所述反饋信息，更新所述前端圖像檢測系統(tǒng)的各項參數(shù)。本發(fā)明還公開實現(xiàn)所述方法的圖像數(shù)據(jù)處理系統(tǒng)。本發(fā)明的技術(shù)方案能夠基于前后端的交互實現(xiàn)目標(biāo)對象的智能檢測與自動化測試。

技術(shù)領(lǐng)域

本發(fā)明屬于機(jī)器視覺與圖像處理技術(shù)領(lǐng)域，尤其涉及融合智能檢測與自動化測試的圖像數(shù)據(jù)處理方法、實現(xiàn)該方法的計算機(jī)可讀存儲介質(zhì)。

背景技術(shù)

機(jī)器視覺技術(shù)被稱為自動化的眼睛，它是當(dāng)今人工智能領(lǐng)域最熱門的研究課題之一。盡管它還是一門年輕的學(xué)科，還沒有形成完整的理論體系，但它是實現(xiàn)工業(yè)生產(chǎn)高度自動化、機(jī)器人智能化、自主車導(dǎo)航、目標(biāo)自動跟蹤以及各種工業(yè)檢測、醫(yī)療和軍事應(yīng)用的核心內(nèi)容之一。

機(jī)器視覺系統(tǒng)通過圖像攝取裝置(例如CMOS和CCD)攝取圖像，圖像處理系統(tǒng)獲取圖像信息同時將其轉(zhuǎn)換為包含像素值、亮度以及色度等數(shù)字信息。通過對這些信息進(jìn)行處理與分析，完成監(jiān)控或者檢測等一系列工業(yè)作業(yè)。不僅在工業(yè)領(lǐng)域中，機(jī)器視覺在農(nóng)業(yè)、軍事、航天、交通等各個領(lǐng)域均發(fā)揮了重要的作用。在現(xiàn)代工業(yè)自動化生產(chǎn)中，經(jīng)常需要對產(chǎn)品進(jìn)行各種各樣的實時定位、檢驗監(jiān)視、包裝分類等。尤其是在大批量的工業(yè)生產(chǎn)過程中，利用人工檢測方式往往由于工人長時間的進(jìn)行重復(fù)單一的工作造成的疲勞或者人的主觀作用等導(dǎo)致生產(chǎn)效率低并且精度不高，極大的提高了企業(yè)的生產(chǎn)成本。而且有一些不適合人類工作的惡劣、危險的環(huán)境或者人的視覺難以滿足要求的情況，極大的限制了工業(yè)的發(fā)展不利于企業(yè)的智能化管理。而且，隨著現(xiàn)代化生產(chǎn)模式的不斷轉(zhuǎn)變，企業(yè)對生產(chǎn)水平要求的不斷提高，對工業(yè)現(xiàn)場的生產(chǎn)線環(huán)境提出了高自動化、高智能化、高效率的要求。計算機(jī)因其處理速度快、效率高等特點，極大地提高了生產(chǎn)效率和生產(chǎn)的自動化程度。將機(jī)器視覺應(yīng)用于企業(yè)生產(chǎn)線中，利用機(jī)器視覺替代人眼以及機(jī)器視覺易于實現(xiàn)信息集成的特點，提高了生產(chǎn)的柔度和自動化程度。

申請?zhí)枮镃N202010453831.X的中國發(fā)明專利申請?zhí)岢鲆环N基于機(jī)器視覺的物體抓取方法、機(jī)器人及存儲介質(zhì)，方法包括：通過所述攝像機(jī)獲取第一傳送帶圖像，根據(jù)所述第一傳送帶圖像采用背景差分法判斷傳送帶上是否有運(yùn)動物體；若是，則對所述第一傳送帶圖像進(jìn)行校正和模板匹配，獲取所述物體的位置信息；根據(jù)所述位置信息對所述物體進(jìn)行抓取。該發(fā)明通過對獲取到的第一傳送帶圖像采用背景差分法來確定傳送帶上是否有運(yùn)動物體，對被遮擋或擺放過近的物體也能檢測出來，不會造成物體漏揀，同時減少了紅外檢測裝置的成本；對第一傳送帶圖像進(jìn)行模板匹配可以實現(xiàn)對物體的分類抓取。

申請?zhí)枮镃N202010788611.2的中國發(fā)明專利申請?zhí)岢龌趫D像處理和機(jī)器學(xué)習(xí)的視覺檢測系統(tǒng)，包括移動防塵系統(tǒng)、負(fù)責(zé)對整個檢測系統(tǒng)進(jìn)行圖像采集的圖像采集系統(tǒng)、負(fù)責(zé)對整個檢測系統(tǒng)的圖像和檢測數(shù)據(jù)進(jìn)行處理并將檢測數(shù)據(jù)進(jìn)行保存和上傳同時還能夠?qū)z測數(shù)據(jù)傳輸至企業(yè)管理系統(tǒng)的圖像處理系統(tǒng)。該發(fā)明實時性強(qiáng)、穩(wěn)定性好、準(zhǔn)確性高、可隨時監(jiān)控檢測結(jié)果，方便安裝。

但是，機(jī)器視覺相比于人眼也有一個很大的缺點，就是機(jī)器視覺的結(jié)果嚴(yán)重依賴于輸入圖像的質(zhì)量好壞。同時，即使輸入圖像的質(zhì)量經(jīng)過圖像復(fù)原等處理之后得到了很大的改善，但由于處理速度過慢，會造成要檢測的目標(biāo)對象在傳送帶上堆積，依舊會影響檢測的進(jìn)度和準(zhǔn)確度。

主要原因在于，機(jī)器視覺所進(jìn)行的檢測和識別實質(zhì)上是依賴于其所得到的目標(biāo)對象的圖像數(shù)據(jù)以及所使用的識別模型，因此，圖像數(shù)據(jù)和識別模型本身的精度對于機(jī)器視覺的效果有著重大影響。使用靜態(tài)的固定不變的圖像采集技術(shù)和識別模型，可能會導(dǎo)致識別結(jié)果出現(xiàn)錯誤，甚至于錯誤的記憶性下的累計錯誤，從而使得機(jī)器識別的精確性逐步降低。

發(fā)明內(nèi)容