[發明專利]一種機器人系統下預處理的方法及系統

有效

• 申請號: 201811032911.7
• 申請日: 2018-09-05
• 公開（公告）號: CN109213101B
• 公開（公告）日: 2021-05-25
• 發明（設計）人: 成偉華;李麗麗;李紅霞;王亞梅;梁佳楠;龔東超
• 申請（專利權）人: 順德職業技術學院;華南智能機器人創新研究院
• 主分類號: G05B19/418
• 分類號: G05B19/418
• 代理公司: 廣東廣盈專利商標事務所(普通合伙) 44339
• 代理人: 李俊

1.一種機器人系統下預處理的方法，其特征在于，工業機器人系統包括：工業機器人、以及位于工業機器人上的視覺控制器、以及控制系統，所述控制系統包括以太網模塊、觸摸屏、處理器和PLC模塊，所述控制系統基于以太網模塊與所述視覺控制器連接，所述控制系統基于PLC模塊與工業機器人連接，所述方法包括：

控制系統基于PLC模塊向位于工業機器人上的視覺控制器和工業機器人發送預處理指令，所述預處理指令用于觸發視覺控制器和工業機器人同時進行工作；

視覺控制器利用視覺控制器上的攝像頭基于控制命令在預處理指令中的預設時間內拍攝工業機器人操作對象的操作圖像，使用深度學習算法訓練專用神經網絡模型提取出操作對象在操作圖像中的位置、姿態，所述預設時間以秒為單位，所述預設時間為0s到30s之間的取值，所述預設時間由用戶基于用戶界面來設置完成；

判斷所述操作圖像中的操作對象位置、姿態是否與模型庫中的背景圖像存在動作差異，并將所述存在動作差異的操作圖像基于以太網模塊發送至控制系統中的處理器；

控制系統中的處理器收到所述操作圖像之后，基于觸摸屏向用戶顯示所述操作圖像；

基于觸摸屏接收用戶所觸發的用戶指令；

控制系統基于所述用戶指令向所述工業機器人發送控制調整指令；

所述工業機器人基于所述控制調整指令在視覺控制器的作用下調整至與模型庫中的背景圖像相一致；

所述控制系統中的處理器收到所述操作圖像之后，基于觸摸屏向用戶顯示所述操作圖像包括：

基于所述操作圖像進行位置和姿態相似度分析，并基于位置和姿態匹配出相似度百分比圖；

將所述操作圖像和所述操作圖像所對應的位置和姿態的相似度百分比圖基于觸摸屏向用戶顯示；

PLC模塊對觸摸屏上所觸發的控制指令進行數據分析處理，向工業機器人發送相應的指令信息，工業機器人根據觸控狀態變換所轉換的指令信息執行相應步驟；

工業機器人在執行完畢后向PLC模塊發送完成信號，等待PLC模塊返回信號后再發出進一步的響應指令；

所述工業機器人基于所述控制調整指令在視覺控制器的作用下調整至與模型庫中的背景圖像相一致包括：基于觸摸屏接收用戶基于所述相似度百分比所觸發的用戶指令；控制系統基于所述用戶指令將所述存在動作差異的操作圖像存在控制系統中的存儲模塊中。

2.如權利要求1所述的機器人系統下預處理的方法，其特征在于，所述方法還包括：

在判斷所述操作圖像中的操作對象位置、姿態與模型庫中的背景圖像未存在動作差異，則基于PLC模塊向觸摸屏顯示操作正常的顯示信息。

3.如權利要求1所述的機器人系統下預處理的方法，其特征在于，所述方法還包括：

控制系統基于PLC模塊向所述工業機器人發送操作指令；

所述工業機器人基于所述操作指令完成相應的操作。

4.如權利要求1所述的機器人系統下預處理的方法，其特征在于，所述深度學習算法采用隨機梯度下降法。

5.如權利要求1所述的機器人系統下預處理的方法，其特征在于，所述專用神經網絡模型采用卷積神經網絡模型AlexNet網絡模型。

6.一種機器人系統下預處理的系統，其特征在于，工業機器人系統包括：工業機器人、以及位于工業機器人上的視覺控制器、以及控制系統，所述控制系統包括以太網模塊、觸摸屏、處理器和PLC模塊，所述控制系統基于以太網模塊與所述視覺控制器連接，所述控制系統基于PLC模塊與工業機器人連接，所述工業機器人控制系統執行如權利要求1至5任一項所述機器人系統下預處理的方法。