[發明專利]一種基于python的大數據分布式任務處理裝置在審
| 申請號: | 201810048206.X | 申請日: | 2018-01-18 |
| 公開(公告)號: | CN108153595A | 公開(公告)日: | 2018-06-12 |
| 發明(設計)人: | 朱鵬;張瑞冬;馬永霄;何立人 | 申請(專利權)人: | 成都無糖信息技術有限公司 |
| 主分類號: | G06F9/50 | 分類號: | G06F9/50 |
| 代理公司: | 暫無信息 | 代理人: | 暫無信息 |
| 地址: | 610000 四川省成都市成都高*** | 國省代碼: | 四川;51 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 分布式處理 任務處理 格式化 隊列模塊 任務信息 引擎 分布式任務處理 任務提交模塊 大數據 任務處理單元 子任務處理 爬蟲 插件模板 處理狀態 任務類型 實時監控 并發數 連接子 插件 進度 | ||
1.一種基于python的大數據分布式任務處理裝置,包括用戶任務提交模塊、任務信息格式化模塊、分布式處理隊列模塊、任務處理引擎和子任務處理單元,其特征在于,所述用戶任務提交模塊連接任務信息格式化模塊,任務信息格式化模塊還連接分布式處理隊列模塊,分布式處理隊列模塊還連接任務處理引擎,任務處理引擎還連接子任務處理單元。
2.根據權利要求1所述的一種基于python的大數據分布式任務處理裝置,其特征在于,所述子任務處理單元包括判斷模塊、插件加載模塊、處理模塊和結果上傳模塊,判斷模塊連接插件加載模塊,插件加載模塊還連接處理模塊,處理模塊還連接結果上傳模塊。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于成都無糖信息技術有限公司,未經成都無糖信息技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810048206.X/1.html,轉載請聲明來源鉆瓜專利網。





