[發明專利]基于機器視覺實現附件組裝防呆檢測處理的系統及其方法

在審

• 申請號: 202011138822.8
• 申請日: 2020-10-22
• 公開（公告）號: CN112347866A
• 公開（公告）日: 2021-02-09
• 發明（設計）人: 樂毅
• 申請（專利權）人: 上海鉑端科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K7/10;G06N3/02;G06F16/955;G06Q50/04
• 代理公司: 上海智信專利代理有限公司 31002
• 代理人: 王潔;鄭暄

1.一種基于機器視覺實現附件組裝防呆檢測處理的系統，其特征在于，所述的系統包括：

視頻畫面幀信息獲取模塊，用于從流水線監控模塊讀取視頻流并從中獲取相應的產品畫面幀信息；

目標檢測模塊，用于根據從所述的視頻畫面幀信息獲取模塊中所獲取的產品畫面幀信息，分析并計算實際產品附件種類及數量信息；

條碼識別模塊，用于根據從所述的視頻畫面幀信息獲取模塊中所獲取的產品畫面幀信息，識別產品條碼并計算相應的條碼值，根據所述的條碼值發送查詢請求到MES系統，并獲取產品的型號及相應附件種類標準清單；

清單比對模塊，用于從所述的目標檢測模塊中獲取實際產品附件種類及數量信息，并從所述的條碼識別模塊中獲取產品的型號及相應附件種類標準清單，將所述的實際產品附件種類及數量信息、所述的產品的型號及相應附件種類標準清單進行一致性比對，并根據比對結果進行后續處理。

2.根據權利要求1所述的基于機器視覺實現附件組裝防呆檢測處理的系統，其特征在于，所述的流水線監控模塊為安裝于流水線工位上的攝像頭模塊。

3.一種利用權利要求1所述的系統實現基于機器視覺的附件組裝防呆檢測處理的方法，其特征在于，所述的方法包括以下步驟：

(1)所述的視頻畫面幀信息獲取模塊獲取產品畫面幀信息并分別發送至所述的目標檢測模塊和條碼識別模塊；

(2)所述的目標檢測模塊獲取相應的產品畫面幀信息，分析并計算實際產品附件種類及數量信息；

(3)所述的條碼識別模塊獲取所述的產品畫面幀信息，識別產品條碼并計算相應的條碼值；

(4)所述的條碼識別模塊根據所述的條碼值發送查詢請求至MES系統，獲取產品的型號及相應附件種類標準清單；

(5)所述的清單比對模塊從所述的目標檢測模塊中獲取實際產品附件種類及數量信息，并從所述的條碼識別模塊中獲取產品的型號及相應附件種類標準清單，將所述的實際產品附件種類及數量信息、所述的產品的型號及相應附件種類標準清單進行一致性比對；

(6)若一致性比對的結果為一致，則返回該組裝附件合格的結果；若一致性比對的結果為不一致，則返回該組裝附件不合格的結果。

4.根據權利要求3所述的基于機器視覺的附件組裝防呆檢測處理的方法，其特征在于，所述的步驟(1)具體為：

所述的視頻畫面幀信息獲取模塊從所述的流水線監控模塊中讀取視頻流，從中獲取相應的產品畫面幀信息，將所述的產品畫面幀信息發送至目標檢測模塊和條碼識別模塊。

5.根據權利要求3所述的基于機器視覺的附件組裝防呆檢測處理的方法，其特征在于，所述的步驟(2)包括以下步驟：

(2.1)所述的目標檢測模塊將所述的產品畫面幀信息輸入至Mobile-SSD深度神經網絡中；

(2.2)所述的目標檢測模塊根據系統預先訓練好的算法模型，自動分析并計算產品畫面幀信息中實際產品的附件種類及數量。

6.根據權利要求3所述的基于機器視覺的附件組裝防呆檢測處理的方法，其特征在于，所述的步驟(3)具體為：

所述的條碼識別模塊將獲取的所述的產品畫面幀信息輸入至圖像條碼識別算法中，自動識別所述的產品畫面幀信息中的產品的包裝箱的條碼值。

7.根據權利要求3所述的基于機器視覺的附件組裝防呆檢測處理的方法，其特征在于，所述的步驟(4)具體為：

所述的條碼識別模塊根據所述的條碼值通過HTTP GET API接口發送查詢請求至MES系統，獲取產品的型號及相應附件種類標準清單。