[發明專利]基于廣播機制實現數據同步的方法及裝置在審
| 申請號: | 201611114939.6 | 申請日: | 2016-12-07 |
| 公開(公告)號: | CN108173891A | 公開(公告)日: | 2018-06-15 |
| 發明(設計)人: | 王喆 | 申請(專利權)人: | 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司 |
| 主分類號: | H04L29/08 | 分類號: | H04L29/08;H04L29/06 |
| 代理公司: | 中原信達知識產權代理有限責任公司 11219 | 代理人: | 張一軍;姜勁 |
| 地址: | 100195 北京市海淀區杏石口路6*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 文件塊 數據文件 目標節點 數據結構 數據同步 廣播機制 同步的 合并 壓縮數據文件 分布式應用 多個目標 分塊處理 分塊數據 高效壓縮 平均分割 數據安全 數據消息 形式廣播 業務類型 自動實現 壓縮 解壓縮 映射 分發 分割 廣播 保證 | ||
1.一種基于廣播機制實現數據同步的方法,其特征在于,所述方法包括:
獲取待同步的數據文件;
壓縮所述數據文件;
將經壓縮的所述數據文件平均分割為多個文件塊,并將分割得到的文件塊映射到對應的數據結構中,所述數據結構的每個節點對應一個文件塊;
將所述文件塊以數據消息的形式廣播至與所述數據文件的業務類型對應的目標節點,其中,所述目標節點根據所述數據結構中節點的順序將接收的所述文件塊合并,并解壓縮合并后的所述文件塊,從而得到所述數據文件。
2.根據權利要求1所述的方法,其特征在于,所述數據結構包括但不限于:集合、鏈表、堆棧。
3.根據權利要求2所述的方法,其特征在于,在將所述文件塊映射到對應的所述鏈表的過程中,按照預設命名規則對所述文件塊命名,所述鏈表的存儲格式為key-value型。
4.根據權利要求3所述的方法,其特征在于,還包括:在將接收的所述文件塊合并生成所述數據文件的過程中,將所述文件塊按照所述預設命名規則合并和解壓縮,生成所述數據文件。
5.一種基于廣播機制實現數據同步的裝置,其特征在于,所述裝置包括:
數據采集模塊,用于獲取待同步的數據文件;
數據壓縮模塊,用于壓縮所述數據文件;
數據分割模塊,用于將經壓縮的所述數據文件平均分割為多個文件塊,并將分割得到的文件塊映射到對應的數據結構中,所述數據結構的每個節點對應一個文件塊;
數據同步模塊,用于將所述文件塊以數據消息的形式廣播至與所述數據文件的業務類型對應的目標節點,其中,所述目標節點根據所述數據結構中節點的順序將接收的所述文件塊合并,并解壓縮合并后的所述文件塊,從而得到所述數據文件。
6.根據權利要求5所述的裝置,其特征在于,所述數據結構包括但不限于:集合、鏈表、堆棧。
7.根據權利要求6所述的裝置,其特征在于,所述數據分割模塊還用于:
在將所述文件塊映射到對應的所述鏈表的過程中,按照預設命名規則對所述文件塊命名,所述鏈表的存儲格式為key-value型。
8.根據權利要求7所述的裝置,其特征在于,所述數據同步模塊還用于:
在將接收的所述文件塊合并生成所述數據文件的過程中,將所述文件塊按照所述預設命名規則合并和解壓縮,生成所述數據文件。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司,未經北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201611114939.6/1.html,轉載請聲明來源鉆瓜專利網。





