[發(fā)明專利]一種基于深度強(qiáng)化學(xué)習(xí)的航天起爆器生產(chǎn)調(diào)度方法

在審

• 申請?zhí)枺?/td>: 202110268713.6
• 申請日: 2021-03-12
• 公開（公告）號: CN112884239A
• 公開（公告）日: 2021-06-01
• 發(fā)明（設(shè)計(jì)）人: 魏善碧;余笑;王昱;肖勇;王輝陽;吳睿
• 申請（專利權(quán)）人: 重慶大學(xué)
• 主分類號: G06Q10/04
• 分類號: G06Q10/04;G06Q10/06;G06Q50/04;G06N7/00;G06N3/08
• 代理公司: 濟(jì)南鼎信專利商標(biāo)代理事務(wù)所(普通合伙) 37245
• 代理人: 賈國浩

1.一種基于深度強(qiáng)化學(xué)習(xí)的航天起爆器生產(chǎn)調(diào)度方法，其特征在于，包括步驟：

S1、從起爆器生產(chǎn)車間獲取生產(chǎn)加工的實(shí)時信息；

S2、根據(jù)起爆器生產(chǎn)車間收集的實(shí)時信息，確定起爆器柔性生產(chǎn)車間調(diào)度問題描述和相關(guān)假設(shè)；

S3、確定起爆器生產(chǎn)車間調(diào)度優(yōu)化的目標(biāo)函數(shù)及約束條件；

S4、將起爆器生產(chǎn)調(diào)度問題構(gòu)造為馬爾科夫決策模型，將實(shí)時信息轉(zhuǎn)化為實(shí)時狀態(tài)；

S5、將實(shí)時狀態(tài)信息存儲在記憶庫中，作為深度強(qiáng)化學(xué)習(xí)DQN算法訓(xùn)練的輸入；

S6、深度強(qiáng)化學(xué)習(xí)DQN算法的訓(xùn)練；

S7、起爆器生產(chǎn)實(shí)時調(diào)度。

2.根據(jù)權(quán)利要求1所述的一種基于深度強(qiáng)化學(xué)習(xí)的航天起爆器生產(chǎn)調(diào)度方法，其特征在于：步驟S1中，所述實(shí)時信息包括機(jī)器設(shè)備總臺數(shù)、生產(chǎn)加工計(jì)劃、各生產(chǎn)工序加工時間、工件加工工序數(shù)以及各加工工序開完工時間。

3.根據(jù)權(quán)利要求1所述的一種基于深度強(qiáng)化學(xué)習(xí)的航天起爆器生產(chǎn)調(diào)度方法，其特征在于：步驟S1中，所述起爆器柔性生產(chǎn)車間調(diào)度問題描述為合理地將每道工序分配到一個具體的設(shè)備，同時排列設(shè)備上工件的加工順序，并確定開始加工的時間，使其滿足調(diào)度優(yōu)化目標(biāo)。

4.根據(jù)權(quán)利要求1所述的一種基于深度強(qiáng)化學(xué)習(xí)的航天起爆器生產(chǎn)調(diào)度方法，其特征在于：步驟S2中，所述相關(guān)假設(shè)包括第一假設(shè)、第二假設(shè)、第三假設(shè)；

所述第一假設(shè)為：各生產(chǎn)機(jī)器設(shè)備相互獨(dú)立，加工過程中互不影響；

所述第二假設(shè)為：在零時刻，任意設(shè)備和工件均準(zhǔn)備就緒；

所述第三假設(shè)為：每臺設(shè)備在任意時刻正在加工的產(chǎn)品只能有一個。

5.根據(jù)權(quán)利要求1所述的一種基于深度強(qiáng)化學(xué)習(xí)的航天起爆器生產(chǎn)調(diào)度方法，其特征在于：步驟S3中，所述目標(biāo)函數(shù)為：

其中，

Minmize W表示最小化機(jī)器總負(fù)荷；Minmize M表示最少加工等待時間；A表示需要生產(chǎn)加工的起爆器的數(shù)量；m表示第m個工件，m∈(1，2，…A)；s_j表示每個起爆器需要多少道加工工序；n表示第n道工序，n∈(1，2，…s_j)；Q表示設(shè)備數(shù)量；q表示第q臺設(shè)備，q∈(1，2，…Q)；

O_mn表示加工工件m的第n道工序；G_mnq表示設(shè)備q加工工序O_mn的加工時間；U_mnq表示工件m在q設(shè)備上進(jìn)行n工序的加工，當(dāng)工序O_mn選擇設(shè)備q加工，則U_mnq＝1，其它則為0；E_m表示加工工件m的的總加工時間；N_mn表示工序O_mn有無存儲固化，當(dāng)有存儲固化，N_mn＝1,若無，則為0；P_mn表示工序O_mn有無配膠環(huán)節(jié)，當(dāng)有配膠時，P_mn＝1,若無，則為0；T_n表示加工工序n的存儲固化工序時間；L_n表示加工工序n的配膠工序時間；I_n表示加工工序n的稱、裝藥時間；H_n表示試裝工序時間；C_m表示加工工件m的任務(wù)交期。

6.根據(jù)權(quán)利要求1所述的一種基于深度強(qiáng)化學(xué)習(xí)的航天起爆器生產(chǎn)調(diào)度方法，其特征在于：步驟S3中，所述約束條件包括：

約束每個工件每道工序只能被加工一次：

約束起爆器工件交期時間：E_m≤C_m；

約束存儲固化工序時間：12≤T_n≤24；

約束試裝工序時間：2≤H_n≤3；

約束配膠工序時間：6≤L_n≤12；

約束稱、裝藥工序時間：3≤I_n≤6。