[發(fā)明專利]一種基于多依賴進(jìn)程的調(diào)度方法和系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010744119.5
• 申請(qǐng)日: 2020-07-29
• 公開(kāi)（公告）號(hào): CN111857970A
• 公開(kāi)（公告）日: 2020-10-30
• 發(fā)明（設(shè)計(jì)）人: 許智凱
• 申請(qǐng)（專利權(quán)）人: 北京思特奇信息技術(shù)股份有限公司
• 主分類號(hào): G06F9/455
• 分類號(hào): G06F9/455;G06F11/30;G06F11/07
• 代理公司: 北京輕創(chuàng)知識(shí)產(chǎn)權(quán)代理有限公司 11212
• 代理人: 蔣杰

本發(fā)明公開(kāi)了一種基于多依賴進(jìn)程的調(diào)度方法和系統(tǒng)，涉及進(jìn)程調(diào)度領(lǐng)域。該方法包括：將多個(gè)腳本文件的依賴關(guān)系配置到入口程序中，通過(guò)入口程序進(jìn)入獲得目標(biāo)數(shù)據(jù)的子流程中，調(diào)用子流程腳本結(jié)合依賴關(guān)系，生成目標(biāo)數(shù)據(jù)，采用統(tǒng)一入口方式集成數(shù)據(jù)采集、數(shù)據(jù)統(tǒng)計(jì)，解決眾多采集程序、統(tǒng)計(jì)程序由于數(shù)據(jù)依賴關(guān)系，數(shù)據(jù)到達(dá)時(shí)間等問(wèn)題導(dǎo)致的異常。

技術(shù)領(lǐng)域

本發(fā)明涉及進(jìn)程調(diào)度領(lǐng)域，尤其涉及一種基于多依賴進(jìn)程的調(diào)度方法和系統(tǒng)。

背景技術(shù)

在復(fù)雜數(shù)據(jù)環(huán)境中，多數(shù)據(jù)源的統(tǒng)計(jì)分析時(shí)，由于數(shù)據(jù)到達(dá)時(shí)間的不同，數(shù)據(jù)之間有較多的相互依賴關(guān)系，現(xiàn)有方案無(wú)法實(shí)現(xiàn)快速分析統(tǒng)計(jì)、同時(shí)減少人工核對(duì)工作，解除由于依賴關(guān)系數(shù)據(jù)缺失導(dǎo)致統(tǒng)計(jì)分析異常。

發(fā)明內(nèi)容

本發(fā)明所要解決的技術(shù)問(wèn)題是針對(duì)現(xiàn)有技術(shù)的不足，提供一種基于多依賴進(jìn)程的調(diào)度方法和系統(tǒng)。

本發(fā)明解決上述技術(shù)問(wèn)題的技術(shù)方案如下：

一種基于多依賴進(jìn)程的調(diào)度方法，包括：

S1，將多個(gè)腳本文件的依賴關(guān)系配置到入口程序中；

S2，通過(guò)所述入口程序進(jìn)入獲得目標(biāo)數(shù)據(jù)的子流程中；

S3，調(diào)用子流程腳本結(jié)合所述依賴關(guān)系，生成所述目標(biāo)數(shù)據(jù)。

本發(fā)明的有益效果是：本方案通過(guò)具有多個(gè)腳本文件的依賴關(guān)系的入口程序進(jìn)入子流程，調(diào)用子流程腳本結(jié)合所述依賴關(guān)系，生成所述目標(biāo)數(shù)據(jù)，采用統(tǒng)一入口方式集成數(shù)據(jù)采集、數(shù)據(jù)統(tǒng)計(jì)，解決眾多采集程序、統(tǒng)計(jì)程序由于數(shù)據(jù)依賴關(guān)系，數(shù)據(jù)到達(dá)時(shí)間等問(wèn)題導(dǎo)致的異常。

進(jìn)一步地，所述S1之前還包括：根據(jù)多個(gè)待統(tǒng)一調(diào)度的應(yīng)用程序來(lái)建立對(duì)應(yīng)的多個(gè)腳本文件，根據(jù)多個(gè)應(yīng)用程序的依賴關(guān)系，建立多個(gè)所述腳本文件的依賴關(guān)系。

采用上述進(jìn)一步方案的有益效果是：本方案通過(guò)建立多個(gè)腳本文件之間的依賴關(guān)系，實(shí)現(xiàn)了當(dāng)眾多采集程序或統(tǒng)計(jì)程序存在依賴關(guān)系時(shí)的調(diào)度，解決了執(zhí)行眾多有依賴關(guān)系的程序的調(diào)用問(wèn)題。

進(jìn)一步地，所述S3之前還包括：

根據(jù)所述依賴關(guān)系確定生成所述目標(biāo)數(shù)據(jù)的關(guān)聯(lián)數(shù)據(jù)；

檢查所述關(guān)聯(lián)數(shù)據(jù)是否存在，如果存在，則進(jìn)行步驟3，如果不存在，則進(jìn)行步驟2。

采用上述進(jìn)一步方案的有益效果是：本方案通過(guò)依賴關(guān)系確定生成目標(biāo)數(shù)據(jù)的關(guān)聯(lián)數(shù)據(jù)，并對(duì)關(guān)聯(lián)數(shù)據(jù)進(jìn)行驗(yàn)證，再想要獲得目標(biāo)數(shù)據(jù)時(shí)，相關(guān)的關(guān)聯(lián)數(shù)據(jù)是否存在，保證了執(zhí)行子流程的基礎(chǔ)數(shù)據(jù)來(lái)源，為獲得目標(biāo)數(shù)據(jù)提供了數(shù)據(jù)條件。

進(jìn)一步地，所述S3還包括：記錄所述子流程腳本的程序日志；

根據(jù)預(yù)設(shè)運(yùn)行標(biāo)識(shí)對(duì)所述程序日志進(jìn)行驗(yàn)證，驗(yàn)證通過(guò)，則完成所述子流程；驗(yàn)證未通過(guò)，則進(jìn)行步驟2。

采用上述進(jìn)一步方案的有益效果是：本方案通過(guò)對(duì)子流程腳本的程序日志進(jìn)行驗(yàn)證，實(shí)現(xiàn)了對(duì)眾多程序的統(tǒng)一輸出、驗(yàn)證，及時(shí)發(fā)現(xiàn)流程中出現(xiàn)的錯(cuò)誤，減少人工核對(duì)、重復(fù)執(zhí)行的問(wèn)題。

進(jìn)一步地，所述驗(yàn)證未通過(guò)之后還具體包括：判斷是否執(zhí)行其他子流程，如果是，則進(jìn)行步驟2；如果否，則結(jié)束流程。

采用上述進(jìn)一步方案的有益效果是：本方案通過(guò)對(duì)未通過(guò)驗(yàn)證的子流程，進(jìn)行新一輪循環(huán)調(diào)用，實(shí)現(xiàn)了在子流程發(fā)現(xiàn)錯(cuò)誤時(shí)，快速定位出錯(cuò)環(huán)節(jié)，快速處理后序流程，有效減少人工操作，及時(shí)進(jìn)行下次子流程，獲得正確數(shù)據(jù)，對(duì)錯(cuò)誤內(nèi)容進(jìn)覆蓋，避免流程錯(cuò)誤帶來(lái)進(jìn)一步影響。

本發(fā)明解決上述技術(shù)問(wèn)題的另一種技術(shù)方案如下：

一種基于多依賴進(jìn)程的調(diào)度系統(tǒng)，包括：配置模塊，入口程序模塊和調(diào)度生成模塊；

所述配置模塊用于將多個(gè)腳本文件的依賴關(guān)系配置到入口程序中；