[發(fā)明專利]一種表面含砂漿的再生骨料多模態(tài)視覺檢測方法和系統(tǒng)

有效

• 申請?zhí)枺?/td>: 202110357964.1
• 申請日: 2021-04-01
• 公開（公告）號: CN113177909B
• 公開（公告）日: 2023-06-20
• 發(fā)明（設(shè)計）人: 房懷英;譚國億;楊建紅;林文華;胡祥
• 申請（專利權(quán)）人: 華僑大學(xué)
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06V20/60;G06V10/20;G06V10/46;G01N21/25;G01N21/84
• 代理公司: 廈門市首創(chuàng)君合專利事務(wù)所有限公司 35204
• 代理人: 張松亭;王婷婷

1.一種表面含砂漿的再生骨料多模態(tài)視覺檢測方法，其特征在于，包括：

通過控制器控制傳送帶的速度將放在傳送帶上的再生骨料依次輸送到各個圖像采集模塊的測量區(qū)域，編碼器讀取傳送帶當(dāng)前速度；

通過雙目單色線陣相機和線激光實現(xiàn)對再生骨料二維像素和高度輪廓的精密測量，得到高度圖像；

通過彩色線陣相機對再生骨料表面圖像進行采集，實現(xiàn)對再生骨料表面紋理的精確測量，得到彩色圖像；

采集再生骨料的高光譜圖，得到高光譜圖像；

對采集到的高度圖像、彩色圖像以及高光譜圖像進行預(yù)處理后，提取再生骨料的投影輪廓和高度輪廓，通過骨料顆粒的多維特征匹配手段，實現(xiàn)對再生骨料多維輪廓的棱角性、表面紋理特征以及有效光譜特征的提取；

以再生骨料高度輪廓、表面紋理特征以及有效光譜特征為輸入，通過多特征信息融合實現(xiàn)再生骨料表面砂漿的識別；

所述再生骨料多維輪廓的棱角性提取具體包括：

多維輪廓的輪廓線包含表面紋理和棱角性特征：x(t)＝w(t)+e(t)+l(t)；

利用灰色動態(tài)濾波分離模型表示：

GM_λw和GM_λl分別為在λw和λl取樣長度內(nèi)對采樣數(shù)據(jù)的灰色建模，GM_λw-l為連續(xù)在λw和λl對應(yīng)的取樣長度內(nèi)進行灰色建模，通過采集樣本不斷更新灰色建模的序列，提取屬于低頻成分的棱角性特征；

其中，式中：w(t)為表面紋理，屬于高頻成分；e(t)為介于表面紋理和棱角性中間的頻率成分；l(t)為棱角性，屬于低頻成分；

有效光譜特征的提取具體包括：

對于提取到的光譜特征，采用主成分和小波分析相結(jié)合的方法對光譜特征進行數(shù)據(jù)預(yù)處理；

對光譜原始特征重新排布，優(yōu)化非線性激活函數(shù)；

用基尼指數(shù)最小劃分特征和劃分值計算方法，實現(xiàn)單個像素點光譜特征選擇和空間壓縮，得到有效光譜數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述的一種表面含砂漿的再生骨料多模態(tài)視覺檢測方法，其特征在于，以再生骨料高度輪廓、表面紋理特征以及有效光譜特征為輸入，通過多特征信息融合實現(xiàn)再生骨料表面砂漿的識別，具體包括：

以再生骨料高度輪廓、表面紋理特征以及有效光譜特征為輸入；

將輸入?yún)?shù)、特征向量以及注意力融合模型通過多特征信息融合方式實現(xiàn)再生骨料表面黏結(jié)砂漿的識別。