[發(fā)明專利]一種海量數(shù)據(jù)遷移的方法及裝置

在審

• 申請?zhí)枺?/td>: 201210592673.1
• 申請日: 2012-12-29
• 公開（公告）號: CN103914458A
• 公開（公告）日: 2014-07-09
• 發(fā)明（設計）人: 蘆薇
• 申請（專利權）人: 中國移動通信集團河北有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京中譽威圣知識產權代理有限公司 11279
• 代理人: 郭振興;叢芳

1.一種海量數(shù)據(jù)遷移的方法，包括以下步驟：

創(chuàng)建遷移配置表；

根據(jù)預設時間周期內所述海量數(shù)據(jù)是否發(fā)生變化判斷遷移數(shù)據(jù)類型；

根據(jù)所述遷移數(shù)據(jù)類型修改所述遷移配置表；

根據(jù)所述遷移配置表遷移所述海量數(shù)據(jù)。

2.根據(jù)權利要求1所述的方法，其特征在于，

所述根據(jù)預設時間周期內所述海量數(shù)據(jù)是否發(fā)生變化判斷遷移數(shù)據(jù)類型的步驟包括：

當預設時間周期內所述海量數(shù)據(jù)沒有發(fā)生變化時，所述遷移數(shù)據(jù)類型為靜態(tài)數(shù)據(jù)；

當預設時間周期內所述海量數(shù)據(jù)發(fā)生了變化時，判斷所述遷移配置表是否有主鍵或者唯一索引；

當所述遷移配置表有主鍵或者唯一索引時，判斷所述遷移配置表的大小是否超過預設值；

當所述遷移配置表的大小超過所述預設值時，所述遷移數(shù)據(jù)類型為動態(tài)大表數(shù)據(jù)；

當所述遷移配置表沒有主鍵或者唯一索引或所述遷移配置表的大小未超過所述預設值時，所述遷移數(shù)據(jù)類型為動態(tài)小表數(shù)據(jù)。

3.根據(jù)權利要求2所述的方法，其特征在于，根據(jù)所述遷移數(shù)據(jù)類型修改所述遷移配置表的步驟包括：

當遷移數(shù)據(jù)類型為靜態(tài)數(shù)據(jù)時，修改所述遷移配置表，配置靜態(tài)遷移；

根據(jù)所述遷移配置表遷移所述海量數(shù)據(jù)的步驟包括：

通過預設的數(shù)據(jù)庫工具遷移所述靜態(tài)數(shù)據(jù)。

4.根據(jù)權利要求2所述的方法，其特征在于，根據(jù)所述遷移數(shù)據(jù)類型修改所述遷移配置表的步驟包括：

當遷移數(shù)據(jù)類型為動態(tài)大表數(shù)據(jù)時，修改所述遷移配置表，配置動態(tài)數(shù)據(jù)遷移；

根據(jù)所述遷移配置表遷移所述海量數(shù)據(jù)的步驟包括：

通過自動處理腳本程序遷移所述動態(tài)數(shù)據(jù)。

5.根據(jù)權利要求4所述的方法，其特征在于，所述通過自動處理腳本程序遷移所述動態(tài)數(shù)據(jù)的步驟包括：

根據(jù)所述動態(tài)大表數(shù)據(jù)的遷移配置表建立觸發(fā)器；

從源端數(shù)據(jù)庫拷貝數(shù)據(jù)至目標數(shù)據(jù)庫；

通過自動處理腳本程序將發(fā)生變化的數(shù)據(jù)應用到目標數(shù)據(jù)庫。

6.根據(jù)權利要求2所述的方法，其特征在于，根據(jù)所述遷移數(shù)據(jù)類型修改所述遷移配置表的步驟包括：

當遷移數(shù)據(jù)類型為動態(tài)小表數(shù)據(jù)時，修改所述遷移配置表，配置割接當晚數(shù)據(jù)遷移；

根據(jù)所述遷移配置表遷移所述海量數(shù)據(jù)的步驟包括：

中斷業(yè)務；

使用邏輯導入導出工具遷移當晚數(shù)據(jù)。

7.根據(jù)權利要求6所述的方法，其特征在于，所述使用邏輯導入導出工具遷移當晚數(shù)據(jù)的步驟后還包括：

查詢所述遷移配置表的狀態(tài)，判斷所述當晚數(shù)據(jù)是否遷移完成；

如果完成，則查詢所述遷移配置表中標記為靜態(tài)數(shù)據(jù)的表；

如果所述靜態(tài)數(shù)據(jù)的表發(fā)生變化，則使用預設的數(shù)據(jù)庫工具遷移所述發(fā)生數(shù)據(jù)變化的靜態(tài)表。

8.一種海量數(shù)據(jù)遷移的裝置，包括遷移配置表創(chuàng)建模塊、遷移數(shù)據(jù)類型判斷模塊、遷移配置表修改模塊和數(shù)據(jù)遷移模塊，其中，

所述遷移配置表創(chuàng)建模塊，用于創(chuàng)建遷移配置表；

所述遷移數(shù)據(jù)類型判斷模塊，用于根據(jù)預設時間周期內所述海量數(shù)據(jù)是否發(fā)生變化判斷遷移數(shù)據(jù)類型；

所述遷移配置表修改模塊，用于根據(jù)所述遷移數(shù)據(jù)類型修改所述遷移配置表；

所述數(shù)據(jù)遷移模塊，用于根據(jù)所述遷移配置表遷移所述海量數(shù)據(jù)。

9.根據(jù)權利要求8所述的裝置，其特征在于，所述遷移數(shù)據(jù)類型判斷模塊進一步用于：

當預設時間周期內所述海量數(shù)據(jù)沒有發(fā)生變化時，所述遷移數(shù)據(jù)類型為靜態(tài)數(shù)據(jù)；

當預設時間周期內所述海量數(shù)據(jù)發(fā)生了變化時，判斷所述遷移配置表是否有主鍵或者唯一索引；

當所述遷移配置表有主鍵或者唯一索引時，判斷所述遷移配置表的大小是否超過預設值；

當所述遷移配置表的大小超過所述預設值時，所述遷移數(shù)據(jù)類型為動態(tài)大表數(shù)據(jù)；

當所述遷移配置表沒有主鍵或者唯一索引或所述遷移配置表的大小未超過所述預設值時，所述遷移數(shù)據(jù)類型為動態(tài)小表數(shù)據(jù)。