[發明專利]一種分布式文件系統算法并行執行方法在審
| 申請號: | 202110477816.3 | 申請日: | 2021-04-29 |
| 公開(公告)號: | CN113176910A | 公開(公告)日: | 2021-07-27 |
| 發明(設計)人: | 周挺輝;周保榮;趙利剛;趙文猛;黃世平;郭瑞鵬;甄鴻越;黃冠標;王長香;吳小珊;徐原;翟鶴峰 | 申請(專利權)人: | 南方電網科學研究院有限責任公司;中國南方電網有限責任公司 |
| 主分類號: | G06F9/445 | 分類號: | G06F9/445;G06F9/48;G06F9/50;G06F16/182 |
| 代理公司: | 廣州三環專利商標代理有限公司 44202 | 代理人: | 麥小嬋;郝傳鑫 |
| 地址: | 510000 廣東省廣州市蘿崗區科*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 分布式 文件系統 算法 并行 執行 方法 | ||
1.一種分布式文件系統算法并行執行方法,其特征在于,所述方法包括:
輸入可執行程序的參數數據;
加載所述可執行程序;
監控并管理所述可執行程序的生命周期;
將所述參數數據分發到不同機器;
將所述可執行程序分發到不同機器執行;
將并行處理后的所述可執行程序的結果回收,并將回收的結果輸出。
2.根據權利要求1所述的分布式文件系統算法并行執行方法,其特征在于,所述輸入可執行程序的參數數據,具體包括:
將所述可執行程序的參數數據以單文件或文件夾的方式上傳到分布式文件系統中;
以列表方式或文件方式獲取參數數據的存儲地址。
3.根據權利要求2所述的分布式文件系統算法并行執行方法,其特征在于,所述加載所述可執行程序,具體包括:
通過上傳和/或在分布式文件系統上選擇的方式,加載所述可執行程序;
并通過所述可執行程序的命令行引用所述可執行程序的參數數據。
4.根據權利要求3所述的分布式文件系統算法并行執行方法,其特征在于,所述監控并管理所述可執行程序的生命周期,具體包括:
監控并管理所述可執行程序的調度執行、資源管理和結果回收的流程。
5.根據權利要求4所述的分布式文件系統算法并行執行方法,其特征在于,所述將所述參數數據分發到不同機器,具體包括:
通過所述調度器將所述參數數據從所述分布式文件系統分發到各個機器;
在各個機器上安裝執行引擎。
6.根據權利要求5所述的分布式文件系統算法并行執行方法,其特征在于,所述將所述可執行程序分發到不同機器執行,具體包括:
根據所述參數數據,將每一個參數數據的可執行程序作為一個任務;
根據預設的任務分發機制將任務隨機分發到空余機器執行。
7.根據權利要求6所述的分布式文件系統算法并行執行方法,其特征在于,所述將并行處理后的所述可執行程序的結果回收,并將回收的結果輸出,具體包括:
監控所述可執行程序的任務執行狀態;
當所述任務執行完成時,根據預設的條件,篩選出符合條件的結果;
將篩選出的結果上傳到所述分布式文件系統預設的目錄中;
結果回收完畢后,將所述目錄中的結果輸出。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于南方電網科學研究院有限責任公司;中國南方電網有限責任公司,未經南方電網科學研究院有限責任公司;中國南方電網有限責任公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110477816.3/1.html,轉載請聲明來源鉆瓜專利網。





