[發(fā)明專利]基于深度學(xué)習(xí)的osd菜單語言自動(dòng)化檢測(cè)方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011102734.2
• 申請(qǐng)日: 2020-10-15
• 公開（公告）號(hào): CN112508845A
• 公開（公告）日: 2021-03-16
• 發(fā)明（設(shè)計(jì)）人: 林志賢;滕斌;郭太良;林珊玲;謝斌
• 申請(qǐng)（專利權(quán)）人: 福州大學(xué);閩都創(chuàng)新實(shí)驗(yàn)室
• 主分類號(hào): G06T7/00
• 分類號(hào): G06T7/00;G06K9/62;G06N3/08;G06N3/04
• 代理公司: 福州元?jiǎng)?chuàng)專利商標(biāo)代理有限公司 35100
• 代理人: 陳明鑫;蔡學(xué)俊

本發(fā)明涉及一種基于深度學(xué)習(xí)的osd菜單語言自動(dòng)化檢測(cè)方法，包括以下步驟：步驟S1:獲取osd菜單的圖像數(shù)據(jù)集；步驟S2:對(duì)圖像數(shù)據(jù)集中的圖像進(jìn)行預(yù)處理，并通過圖像增廣擴(kuò)充數(shù)據(jù)集；步驟S3:構(gòu)建深度神經(jīng)網(wǎng)絡(luò)，并對(duì)圖像數(shù)據(jù)集經(jīng)行特征提取；步驟S4:根據(jù)提取的特征通過分類器分類，以實(shí)現(xiàn)不同界面不同拍攝環(huán)境下osd菜單文字的識(shí)別；步驟S5:利用人工設(shè)計(jì)特征，使用模板匹配的方法精選輔助訓(xùn)練，對(duì)分類器的分類結(jié)果進(jìn)一步分類，獲取osd菜單所示文字的識(shí)別結(jié)果；步驟S6:利用匹配定位算法，比照標(biāo)準(zhǔn)對(duì)照表定位出osd菜單上顯示不符標(biāo)準(zhǔn)的地方。本發(fā)明可以精確高速的檢索定位出菜單顯示不標(biāo)準(zhǔn)的地方，為顯示器生產(chǎn)過程中osd菜單檢錯(cuò)提供了更好的解決方案。

技術(shù)領(lǐng)域

本發(fā)明涉及文字識(shí)別領(lǐng)域，具體涉及一種基于深度學(xué)習(xí)的osd菜單語言自動(dòng)化檢測(cè)方法及系統(tǒng)。

背景技術(shù)

近年來，由于制造工藝或軟硬件設(shè)計(jì)缺陷的問題，顯示器在生產(chǎn)研制過程中難免存在各種潛在問題，所以顯示器在出廠前需要經(jīng)過嚴(yán)格的測(cè)試驗(yàn)證。傳統(tǒng)的測(cè)試包含功能測(cè)試、性能測(cè)試等一系列的測(cè)試，從當(dāng)前行業(yè)內(nèi)測(cè)試現(xiàn)狀來看，制造商主要仍依賴于手動(dòng)測(cè)試或半自動(dòng)化測(cè)試。常規(guī)的手動(dòng)測(cè)試需要根據(jù)每條測(cè)試用例的指示要求，首先人工點(diǎn)擊顯示器按鍵進(jìn)行OSD菜單的測(cè)試環(huán)境設(shè)置；然后手動(dòng)操作測(cè)試儀器讀取數(shù)據(jù)，同時(shí)需配合人眼觀察顯示；最后，記錄測(cè)試結(jié)果并編寫測(cè)試報(bào)告。顯然這樣的測(cè)試方式不僅需要耗費(fèi)大量的時(shí)間、人力，而且容易因?yàn)槿藶槭韬鲈斐陕z或誤檢，測(cè)試結(jié)果難以保證，無法滿足高要求的測(cè)試需求。

OSD(On Screen Display)是用戶對(duì)顯示器進(jìn)行設(shè)置以獲得最優(yōu)視覺享受的重要設(shè)置，它提供了人機(jī)交互的通道。在生產(chǎn)中為避免OSD菜單出現(xiàn)文字錯(cuò)誤，解決辦法是人工根據(jù)廠家提供的標(biāo)準(zhǔn)說明書和出廠的顯示器上的OSD菜單的文字進(jìn)行對(duì)比，以此得到出廠的顯示器的OSD菜單文字是否有誤。人工檢測(cè)的工作量大，容易造成視覺疲勞，從而導(dǎo)致誤檢率升高。不同文字語法書寫和字形都有很大的變化。而現(xiàn)在工業(yè)上成熟的只有文字識(shí)別系統(tǒng)，文字檢測(cè)系統(tǒng)尚不成熟，也沒有成熟的理論和技術(shù)可檢測(cè)這么多種語言的文字異常，包括缺點(diǎn)，缺筆畫，文字顯示不完整等顯示上的缺陷。研究OSD菜單文字檢測(cè)的自動(dòng)化技術(shù)成為急需解決的一個(gè)問題。

目前，圖像識(shí)別的已有方法中，大都采用人工設(shè)計(jì)特征的方式，如采用HOG(Histogram of Oriented Gradients，方向梯度直方圖)、SIFT(Scale InvariantFeatureTransform，尺度不變特征變換)等方法提取人工特征并輸入到分類器中完成模式分類。這種方式完全取決于人類的先驗(yàn)知識(shí)，而且設(shè)計(jì)過程費(fèi)時(shí)費(fèi)力，工作量巨大。而深度學(xué)習(xí)技術(shù)在一定程度上解決了以上問題，深度學(xué)習(xí)技術(shù)通過大量隱藏層的深度神經(jīng)網(wǎng)絡(luò)可進(jìn)行特征的自動(dòng)學(xué)習(xí)，從像素中提取出更本質(zhì)、更抽象、更易于模型學(xué)習(xí)的特征，而且提供的訓(xùn)練樣本越多，模型的泛化能力、推廣能力越強(qiáng)。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明的目的在于提供一種基于深度學(xué)習(xí)的osd菜單語言自動(dòng)化檢測(cè)系統(tǒng)，可以精確高速的檢索定位出菜單顯示不標(biāo)準(zhǔn)的地方，為顯示器生產(chǎn)過程中osd菜單檢錯(cuò)提供了更好的解決方案。

為實(shí)現(xiàn)上述目的，本發(fā)明采用如下技術(shù)方案：

一種基于深度學(xué)習(xí)的osd菜單語言自動(dòng)化檢測(cè)方法，包括以下步驟：

步驟S1:獲取osd菜單的圖像數(shù)據(jù)集；

步驟S2:對(duì)圖像數(shù)據(jù)集中的圖像進(jìn)行預(yù)處理，并通過圖像增廣擴(kuò)充數(shù)據(jù)集；

步驟S3:構(gòu)建深度神經(jīng)網(wǎng)絡(luò)，并對(duì)圖像數(shù)據(jù)集經(jīng)行特征提取；

步驟S4:根據(jù)提取的特征通過分類器分類，以實(shí)現(xiàn)不同界面不同拍攝環(huán)境下osd菜單文字的識(shí)別；

步驟S5:利用人工設(shè)計(jì)特征，使用模板匹配的方法精選輔助訓(xùn)練，對(duì)分類器的分類結(jié)果進(jìn)一步分類，獲取osd菜單所示文字的識(shí)別結(jié)果；

步驟S6:利用匹配定位算法，比照標(biāo)準(zhǔn)對(duì)照表定位出osd菜單上顯示不符標(biāo)準(zhǔn)的地方。