[發明專利]數據文件可靠存儲方法在審
| 申請號: | 201810186581.0 | 申請日: | 2018-03-07 |
| 公開(公告)號: | CN108388658A | 公開(公告)日: | 2018-08-10 |
| 發明(設計)人: | 楊曉瑩;吳偉杰 | 申請(專利權)人: | 成都創信特電子技術有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30;H04L29/08 |
| 代理公司: | 北京天奇智新知識產權代理有限公司 11340 | 代理人: | 楊春 |
| 地址: | 610041 四川省*** | 國省代碼: | 四川;51 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據文件 存儲 中繼單元 數據塊 云存儲服務器 結果數據 實時變化 實時處理 大數據 集合 傳輸 | ||
1.一種數據文件可靠存儲方法,其特征在于,包括:
將接收到的數據根據數據塊名劃分,并通過與數據塊名對應的通道傳送給DataNode的中繼單元;將來自所述中繼單元的結果數據傳輸給對應的云存儲服務器。
2.根據權利要求1所述的方法,其特征在于:
所述中繼單元接收劃分后的數據,并將接收到的數據放入以待處理業務名稱命名的隊列中;
基于各待處理業務的優先級開啟待處理業務,并將待處理業務發送給DataNode計算單元;
所述計算單元開啟的待處理業務,對來自中繼單元的數據進行計算,并向中繼單元輸出計算之后的數據塊。
3.根據權利要求1所述的方法,其特征在于,所述方法還包括:
使DataNode的數據傳輸和內部的邏輯計算隔離,將輸入數據按數據塊名劃分,并將數據傳送給中繼單元;中繼單元根據數據和當前DataNode的待處理業務的關聯關系,維護一個針對所有處于就緒狀態的待處理業務的分層隊列。
4.根據權利要求1所述的方法,其特征在于,所述中繼單元根據DataNode的負載確定啟動多少個業務,并從分層隊列中選擇相應數量的、優先級最高的待處理業務啟動;
所述中繼單元還將數據傳送給執行待處理業務的計算單元,并接收經過計算單元處理后的結果數據;在包括上述DataNode的云計算系統中,對輸入或結果數據的劃分、融合和處理都在內存中完成。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于成都創信特電子技術有限公司,未經成都創信特電子技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810186581.0/1.html,轉載請聲明來源鉆瓜專利網。





