[發明專利]分布式緩存數據離線傳輸方法、裝置及可讀存儲介質有效
| 申請號: | 202011148516.2 | 申請日: | 2020-10-23 |
| 公開(公告)號: | CN112231148B | 公開(公告)日: | 2022-07-05 |
| 發明(設計)人: | 徐東 | 申請(專利權)人: | 北京思特奇信息技術股份有限公司 |
| 主分類號: | G06F11/14 | 分類號: | G06F11/14 |
| 代理公司: | 北京輕創知識產權代理有限公司 11212 | 代理人: | 厲洋洋 |
| 地址: | 100089 北京市海淀*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 分布式 緩存 數據 離線 傳輸 方法 裝置 可讀 存儲 介質 | ||
1.一種分布式緩存數據離線傳輸方法,其特征在于,包括:
主集群將接收到的緩存數據按照預設格式實時存入磁盤持久化文件中;
當所述主集群故障時,對所述磁盤持久化文件中的數據依次進行實時解析,獲取對應的所述緩存數據,將獲取的所述緩存數據存入副集群中;
所述對所述磁盤持久化文件中的數據依次進行實時解析,獲取對應的所述緩存數據,將獲取的所述緩存數據存入副集群中,包括:
依次讀取磁盤持久化文件中的一條數據,進行如下操作:
解析第一行,確認命令參數個數M;
解析第n行,確認第n-1個命令參數的長度,根據所述第n-1個命令參數的長度截取第n+1行的數據;其中,n=2、4、6......N,N=2*M;
將所有所述n+1行的數據拼湊起來,獲得對應的所述緩存數據,將獲取的所述緩存數據存入副集群中。
2.根據權利要求1所述的方法,其特征在于,還包括對當前處理的磁盤持久化文件中的數據進行標記與記錄,當數據解析完成并成功存入副集群后,標記與記錄下一條數據。
3.根據權利要求2所述的方法,其特征在于,還包括:對所述磁盤持久化文件中的數據依次進行實時解析時如果出現宕機,再次恢復時則根據上一次傳輸的標記進行續傳。
4.根據權利要求1至3任一項所述的方法,其特征在于,還包括預先設置所述磁盤持久化文件的持久化類型為always。
5.根據權利要求1至3任一項所述的方法,其特征在于,還包括:當所述磁盤持久化文件中的數據全部解析完成并成功存入副集群后,反饋成功信號。
6.一種分布式緩存數據離線傳輸裝置,其特征在于,包括:
數據寫入模塊,用于主集群將接收到的緩存數據按照預設格式實時存入磁盤持久化文件中;
數據解析遷移模塊,用于當所述主集群故障時,對所述磁盤持久化文件中的數據依次進行實時解析,獲取對應的所述緩存數據,將獲取的所述緩存數據存入副集群中;
所述數據解析遷移模塊用于:依次讀取磁盤持久化文件中的一條數據,進行如下操作:
解析第一行,確認命令參數個數M;
解析第n行,確認第n-1個命令參數的長度,根據所述第n-1個命令參數的長度截取第n+1行的數據;其中,n=2、4、6......N,N=2*M;
將所有所述n+1行的數據拼湊起來,獲得對應的所述緩存數據,將獲取的所述緩存數據存入副集群中。
7.一種計算機可讀存儲介質,包括指令,其特征在于,當所述指令在計算機上運行時,使所述計算機執行根據權利要求1至5任一項所述的分布式緩存數據離線傳輸方法。
8.一種計算機設備,包括存儲器、處理器及存儲在所述存儲器上的并可在所述處理器上運行的計算機程序,其特征在于,所述處理器執行所述程序時實現如權利要求1至5任一項所述的分布式緩存數據離線傳輸方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京思特奇信息技術股份有限公司,未經北京思特奇信息技術股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011148516.2/1.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種三軸輸出減速器
- 下一篇:一種噴霧機以及殺菌處理方法
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





