[發(fā)明專利]支持多種計算框架的單元化按需計算方法及相關(guān)裝置

有效

• 申請?zhí)枺?/td>: 201710812906.7
• 申請日: 2017-09-11
• 公開（公告）號: CN107562528B
• 公開（公告）日: 2021-06-29
• 發(fā)明（設(shè)計）人: 胡博
• 申請（專利權(quán)）人: 金蝶軟件（中國）有限公司
• 主分類號: G06F9/48
• 分類號: G06F9/48;G06F9/50
• 代理公司: 深圳市深佳知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44285
• 代理人: 王仲凱

本發(fā)明公開了一種支持多種計算框架的單元化按需計算方法及相關(guān)裝置，該方法包括：獲取工作的任務(wù)規(guī)劃；所述任務(wù)規(guī)劃包括任務(wù)的個數(shù)、類型、執(zhí)行順序、執(zhí)行時間和周期；根據(jù)所述任務(wù)規(guī)劃的內(nèi)容解析出各個任務(wù)的配置信息；根據(jù)所述配置信息調(diào)用相應(yīng)的任務(wù)，并為被調(diào)用的任務(wù)配置特定的計算資源和對應(yīng)的計算框架，執(zhí)行被調(diào)用的任務(wù)。采用該方法，用戶可以根據(jù)實際需求將工作劃分為一系列按照流程編排的任務(wù)；根據(jù)任務(wù)規(guī)劃可以解析出各個任務(wù)的配置信息，然后根據(jù)配置信息調(diào)用相應(yīng)的任務(wù)執(zhí)行，為該任務(wù)分配與其對應(yīng)的特定的資源和計算框架，從而實現(xiàn)計算資源的按需分配，提高資源利用率。

技術(shù)領(lǐng)域

本發(fā)明涉及云計算領(lǐng)域，特別是涉及一種支持多種計算框架的單元化按需計算方法及相關(guān)裝置。

背景技術(shù)

近年來，隨著云計算、移動互聯(lián)網(wǎng)、社交網(wǎng)絡(luò)以及物聯(lián)網(wǎng)等技術(shù)的發(fā)明和應(yīng)用，互聯(lián)網(wǎng)得到前所未有的發(fā)展，開始從新興的信息產(chǎn)業(yè)向傳統(tǒng)產(chǎn)業(yè)蔓延，在金融、零售、交通出行等行業(yè)被逐個顛覆的同時，越來越多的行業(yè)逐漸意識到與其被動應(yīng)對不如主動求變，“互聯(lián)網(wǎng)+”每一個傳統(tǒng)行業(yè)將為我國的產(chǎn)業(yè)調(diào)整與升級提供新的機遇并為經(jīng)濟發(fā)展尋求新的增長點。與此同時，大數(shù)據(jù)隨之而來。越來越多的企業(yè)通過實施互聯(lián)網(wǎng)化開始擁有大數(shù)據(jù)，包括累積擁有企業(yè)內(nèi)部專有大數(shù)據(jù)及采集獲取互聯(lián)網(wǎng)公共大數(shù)據(jù)。在未來，大數(shù)據(jù)將不再是政府或者互聯(lián)網(wǎng)企業(yè)的專利，而是每一個企業(yè)都有可能成為大數(shù)據(jù)企業(yè)，包括擁有采集、存儲和處理大數(shù)據(jù)的能力，以及利用大數(shù)據(jù)實現(xiàn)變現(xiàn)的能力。

我國目前有各種類型企業(yè)5000多萬家，其中95％都是中小企業(yè)，對于這些企業(yè)而言發(fā)展自己的大數(shù)據(jù)能力似乎可望而不可即，然而能力不一定要為其所有，但一定要能夠為其所用，利用云計算帶來的軟件即服務(wù)(Software as a Service,SaaS)這一創(chuàng)新模式，能夠?qū)⒋髷?shù)據(jù)相關(guān)的能力進行服務(wù)化、服務(wù)按需使用和按使用付費，為中小企業(yè)也擁有大數(shù)據(jù)能力奠定了基礎(chǔ)。

然而現(xiàn)有的云計算服務(wù)并不能很好地對計算資源進行分配，同一工作內(nèi)部的不同任務(wù)會出現(xiàn)對計算資源的搶占，從而對其他任務(wù)、其他工作甚至其他用戶帶來惡劣影響。

因此，如何提供一種合理分配計算資源的云計算服務(wù)的技術(shù)方案，在滿足云計算用戶對計算資源的需求的同時實現(xiàn)計算資源的利用最大化，是本領(lǐng)域技術(shù)人員目前需要解決的技術(shù)問題。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種支持多種計算框架的單元化按需計算方法及相關(guān)裝置，為每個任務(wù)分配獨立合理的計算資源，實現(xiàn)計算資源的利用最大化。

為解決上述技術(shù)問題，本發(fā)明提供了如下技術(shù)方案：

一種支持多種計算框架的單元化按需計算方法，包括：

獲取工作的任務(wù)規(guī)劃；所述任務(wù)規(guī)劃包括任務(wù)的個數(shù)、類型、執(zhí)行順序、執(zhí)行時間和周期；

根據(jù)所述任務(wù)規(guī)劃的內(nèi)容解析出各個任務(wù)的配置信息；

根據(jù)所述配置信息調(diào)用相應(yīng)的任務(wù)，并為被調(diào)用的任務(wù)配置特定的計算資源和對應(yīng)的計算框架，執(zhí)行被調(diào)用的任務(wù)。

優(yōu)選地，根據(jù)所述任務(wù)規(guī)劃的內(nèi)容解析出各個任務(wù)的配置信息，包括：

根據(jù)所述任務(wù)規(guī)劃的內(nèi)容解析出各個任務(wù)的任務(wù)信息、資源需求、數(shù)據(jù)存儲位置、執(zhí)行計劃和執(zhí)行結(jié)果信息。

優(yōu)選地，根據(jù)所述配置信息調(diào)用相應(yīng)的任務(wù)，并為被調(diào)用的任務(wù)配置特定的計算資源和對應(yīng)的計算框架，執(zhí)行被調(diào)用的任務(wù)，包括：

根據(jù)所述執(zhí)行計劃調(diào)用相應(yīng)的任務(wù)；

為被調(diào)用的任務(wù)選擇對應(yīng)的計算框架；

根據(jù)所述資源需求，從計算資源池為被調(diào)用的任務(wù)配置相應(yīng)的所述計算資源參與計算；

根據(jù)被調(diào)用的任務(wù)的類型，將計算產(chǎn)生的中間結(jié)果保存到相應(yīng)的位置；