[發(fā)明專利]一種基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)及方法

在審

• 申請?zhí)枺?/td>: 202011508963.4
• 申請日: 2020-12-18
• 公開（公告）號: CN112689069A
• 公開（公告）日: 2021-04-20
• 發(fā)明（設(shè)計）人: 張鵬;蔣秋明
• 申請（專利權(quán)）人: 上海上實龍創(chuàng)智能科技股份有限公司
• 主分類號: H04N5/225
• 分類號: H04N5/225;H04N7/18;G06T7/10;G06T7/246;G08B21/24;H04L12/66;H04L29/08
• 代理公司: 上海科盛知識產(chǎn)權(quán)代理有限公司 31225
• 代理人: 林君如

1.一種基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，包括：

視頻采集模塊，采集產(chǎn)線作業(yè)人員的實際自動生產(chǎn)操作的視頻圖像信息并保存；

邊緣分析處理模塊，該模塊部署在云環(huán)境，通過對實際采集的作業(yè)人員的實際自動生產(chǎn)操作的視頻圖像信息與標準動作圖像信息進行比對，判斷產(chǎn)線作業(yè)人員的操作是否符合標準要求，所述邊緣分析處理模塊基于邊緣網(wǎng)關(guān)實現(xiàn)；

展示提醒模塊，實時顯示采集的產(chǎn)線作業(yè)人員的實際自動生產(chǎn)操作的視頻圖像信息，并對不符合標準要求的視頻圖像信息進行報警。

2.根據(jù)權(quán)利要求1所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，所述視頻采集模塊包括用以采集產(chǎn)線作業(yè)人員的實際自動生產(chǎn)操作的視頻圖像信息及產(chǎn)線上產(chǎn)品到達產(chǎn)線作業(yè)人員處至離開產(chǎn)線作業(yè)人員的時間的動作捕捉單元，及用以對采集的視頻圖像信息、時間信息進行存儲的視頻存儲單元。

3.根據(jù)權(quán)利要求1所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，所述邊緣分析處理模塊包括標準數(shù)據(jù)庫和對比分析單元，所述標準數(shù)據(jù)庫預(yù)先存儲符合操作要求的標準動作視頻圖像信息和在產(chǎn)線上從開始到結(jié)束的平均標準耗時，所述比對分析模塊將視頻采集模塊實時采集的視頻圖像信息、時間信息與所述標準數(shù)據(jù)庫中的標準動作視頻圖像信息、在產(chǎn)線上從開始到結(jié)束的平均標準耗時分別進行比對，判斷產(chǎn)線作業(yè)人員的操作是否符合標準要求。

4.根據(jù)權(quán)利要求1所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，若邊緣分析模塊判斷出所述視頻采集模塊采集的視頻圖像信息、時間信息與所述標準數(shù)據(jù)庫中的標準數(shù)據(jù)至少有一項不符合，則所述展示提醒模塊發(fā)出警報。

5.根據(jù)權(quán)利要求4所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，所述展示提醒模塊包括用以實時顯示采集的產(chǎn)線作業(yè)人員的實際自動生產(chǎn)操作的視頻圖像信息的顯示單元，以及用以對判斷的不符合標準要求的視頻圖像信息進行警報的報警單元。

6.根據(jù)權(quán)利要求2所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，所述視頻采集模塊采用實時視頻監(jiān)控攝像頭。

7.根據(jù)權(quán)利要求3所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，所述邊緣分析模塊包括邊緣網(wǎng)關(guān)與云端視頻監(jiān)控分析服務(wù)器，所述邊緣網(wǎng)關(guān)預(yù)先設(shè)定產(chǎn)品在產(chǎn)線上從開始到結(jié)束的平均耗時，以及預(yù)先設(shè)定標準動作視頻圖像信息，所述云端視頻監(jiān)控分析服務(wù)器將預(yù)設(shè)的信息與視頻采集模塊提供的數(shù)據(jù)進行對比，自動判斷出生產(chǎn)過程是否符合標準要求。

8.根據(jù)權(quán)利要求5所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，所述展示提醒模塊包括執(zhí)行器和實時預(yù)警計算機，當云端視頻監(jiān)控分析服務(wù)器判斷出問題時，所述執(zhí)行器發(fā)出警報，并根據(jù)判斷結(jié)果為產(chǎn)線工作人員執(zhí)行糾正操作，所述實時預(yù)警計算機實時顯示采集的產(chǎn)線作業(yè)人員的實際操作的視頻圖像信息，并對不符合要求的信息進行及時的顯示警報。

9.根據(jù)權(quán)利要求8所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)，其特征在于，所述執(zhí)行器包括右后線性執(zhí)行器、左后線性執(zhí)行器、左前線性執(zhí)行器和右前線性執(zhí)行器，各線性執(zhí)行器分別設(shè)于產(chǎn)線作業(yè)人員的操作工區(qū)四周。

10.一種實現(xiàn)如權(quán)利要求1-9任一項所述的基于邊緣網(wǎng)關(guān)的產(chǎn)線糾錯輔助系統(tǒng)的糾錯輔助方法，其特征在于，包括下列步驟：

1)利用實時視頻監(jiān)控攝像頭實時采集產(chǎn)線作業(yè)人員的自動生產(chǎn)動作視頻數(shù)據(jù)流以及產(chǎn)線上產(chǎn)品到達產(chǎn)線作業(yè)人員處至離開產(chǎn)線作業(yè)人員的時間，將實時視頻監(jiān)控攝像頭與邊緣網(wǎng)關(guān)通過以太網(wǎng)進行連接；

2)邊緣網(wǎng)關(guān)接收步驟1)得到的視頻數(shù)據(jù)流，將視頻數(shù)據(jù)流進行預(yù)處理，獲取預(yù)定的視頻格式的視頻數(shù)據(jù)后進行圖像檢測，并在圖像中進行特征點提取后，將提取的結(jié)果與步驟1)得到的時間數(shù)據(jù)通過網(wǎng)絡(luò)上傳云端視頻監(jiān)控分析服務(wù)器進行標準要求判斷；

3)在云端視頻監(jiān)控分析服務(wù)器進行標準要求判斷后，邊緣網(wǎng)關(guān)將判斷結(jié)果發(fā)送至執(zhí)行器，并對執(zhí)行器發(fā)出糾錯動作指令，激活展示提醒模塊，實現(xiàn)顯示、提醒報警一系列展示動作。