[發明專利]數據遷移方法及裝置有效
| 申請號: | 201710197702.7 | 申請日: | 2017-03-29 |
| 公開(公告)號: | CN108664496B | 公開(公告)日: | 2022-03-25 |
| 發明(設計)人: | 劉軍;方錦亮;趙重慶;溫偉飛;李良必 | 申請(專利權)人: | 騰訊科技(深圳)有限公司 |
| 主分類號: | G06F16/21 | 分類號: | G06F16/21;G06F16/27 |
| 代理公司: | 北京三高永信知識產權代理有限責任公司 11138 | 代理人: | 朱雅男 |
| 地址: | 518057 廣東省深圳*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據 遷移 方法 裝置 | ||
1.一種數據遷移方法,其特征在于,所述方法包括:
根據原服務集群的計算任務日志,獲取多個關系鏈,所述計算任務日志用于記錄所述原服務集群中計算任務與業務數據的關聯關系,每個關系鏈用于指示具有關聯關系的一組計算任務和業務數據;
以關系鏈為單位,將所述多個關系鏈所指示的業務數據和計算任務依次遷移至目標服務集群;
其中,在基于任一個關系鏈進行遷移時,正常運行所述多個關系鏈中未進行遷移的關系鏈所指示的計算任務。
2.根據權利要求1所述的方法,其特征在于,所述根據原服務集群的計算任務日志,獲取多個關系鏈包括:
根據所述計算任務日志所記錄的多條輸入輸出記錄,為具有關聯關系的輸入輸出記錄添加相同的關系鏈標識,為不具有關聯關系的輸入輸出記錄添加不同的關系鏈標識;
按照相同關系鏈標識的輸入輸出記錄所指示的計算任務和業務數據之間的關聯關系,生成多個關系鏈,每個關系鏈包括用于指示計算任務的任務節點、用于指示業務數據的數據節點以及任務節點和數據節點之間的關聯關系。
3.根據權利要求2所述的方法,其特征在于,所述按照相同關系鏈標識的輸入輸出記錄所指示的計算任務和業務數據之間的關聯關系,生成多個關系鏈包括:
按照相同關系鏈標識的輸入輸出記錄所指示的計算任務和業務數據之間的關聯關系,生成多個第一關系鏈;
如果所述多個第一關系鏈中包括第二關系鏈,則將所述第二關系鏈拆分為多個第三關系鏈,所述第二關系鏈為所指示業務數據的數據量超過第一閾值的第一關系鏈。
4.根據權利要求3所述的方法,其特征在于,所述將所述第二關系鏈拆分為多個第三關系鏈包括:
獲取所述第二關系鏈中多個數據節點的權值,每個數據節點的權值用于指示所述數據節點在所述第二關系鏈中的關聯程度,權值越高被關聯程度越高;
按照權值從高到低的順序和所述多個數據節點在所述第二關系鏈上的位置,從所述多個數據節點中獲取關鍵數據節點,所述關鍵數據節點為所述順序中第一個能夠將所述第二關系鏈拆分為至少兩個第三關系鏈的數據節點;
基于所述關鍵數據節點,將所述第二關系鏈中與所述關鍵數據節點相關聯的多個任務節點拆分至多個第三關系鏈中。
5.根據權利要求4所述的方法,其特征在于,所述基于所述關鍵數據節點,將所述第二關系鏈中與所述關鍵數據節點相關聯的多個任務節點拆分至多個第三關系鏈中包括:
對于與所述關鍵數據節點直接關聯的多個任務節點中的每個任務節點,將所述關鍵數據節點、所述任務節點以及所述關鍵數據節點與所述任務節點斷開連接關系時與所述任務節點具有關聯關系的節點確定為第三關系鏈;或,
將所述關鍵數據節點確定為一個第三關系鏈,對于與所述關鍵數據節點直接關聯的多個任務節點中的每個任務節點,將除所述關鍵數據節點之外的、與所述任務節點具有關聯關系的節點確定為第三關系鏈;或,
將所述關鍵數據節點、與所述關鍵數據節點直接關聯的至少一個任務節點以及與所述至少一個任務節點具有關聯關系的節點拆分為一個第三關系鏈,將除了已拆分的第三關系鏈之外的任務節點和數據節點拆分為至少一個第三關系鏈。
6.根據權利要求4所述的方法,其特征在于,所述將所述第二關系鏈拆分為多個第三關系鏈之后,所述方法還包括:
獲取關鍵業務數據在所述目標服務集群中的目標存儲路徑,所述關鍵業務數據為所述關鍵數據節點所指示的業務數據;
在數據路徑映射表中添加所述目標存儲路徑,且保留所述關鍵業務數據在所述原服務集群中的原存儲路徑。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于騰訊科技(深圳)有限公司,未經騰訊科技(深圳)有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710197702.7/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





