[發明專利]數據遷移方法、裝置、計算機設備和存儲介質

有效

• 申請號: 201810103315.7
• 申請日: 2018-02-01
• 公開（公告）號: CN108304553B
• 公開（公告）日: 2021-04-27
• 發明（設計）人: 陳果;徐鑫
• 申請（專利權）人: 平安普惠企業管理有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 易皎鶴

本申請涉及一種數據遷移方法、系統、計算機設備和存儲介質。所述方法包括：查詢中間數據庫中是否存在未從源數據庫導入至目標數據庫的數據的當前索引；若存在，則從中間數據庫獲取與當前索引對應的未導入數據；將與當前索引對應的未導入數據導入目標數據庫；獲取與當前索引對應的未導入數據導入目標數據庫的綜合導入結果，并查詢中間數據庫中是否存在未從源數據庫導入至目標數據庫的新的數據的索引；若存在，則根據綜合導入結果和新的數據的索引更新當前索引；根據從中間數據庫中獲取與更新后的當前索引對應的未導入數據，并將與更新后的當前索引對應的未導入數據導入目標數據庫。采用本方法能夠提高數據遷移的準確性。

技術領域

本申請涉及計算機技術領域，特別是涉及一種數據遷移方法、裝置、計算機設備和存儲介質。

背景技術

隨著現代科技的發展，人們的生活越來越離不開數據，而我們日常所用的各種存儲系統也是依托數據來執行各種功能，數據庫管理得到越來越廣泛的應用，而在使用數據庫的過程中，由于系統的切換和對不同系統中數據的統計和篩選等需求，經常需要進行數據遷移。

在傳統的數據遷移過程中，由于遷移數據的數量龐大，需要較長的遷移時間，而在此期間如果目標數據庫或者遷移線路出現異常，則會導致數據丟失，造成數據遷移的不準確。

發明內容

基于此，有必要針對上述技術問題，提供一種能夠提高數據遷移準確性的數據遷移方法、裝置、計算機設備和存儲介質。

一種數據遷移方法，所述方法包括：

查詢中間數據庫中是否存在未從源數據庫導入至目標數據庫的數據的當前索引；若存在，則從所述中間數據庫獲取與所述當前索引對應的未導入數據；

將與所述當前索引對應的所述未導入數據導入所述目標數據庫；

獲取與所述當前索引對應的所述未導入數據導入所述目標數據庫的綜合導入結果，并查詢所述中間數據庫中是否存在未從源數據庫導入至目標數據庫的新的數據的索引；若存在，則根據所述綜合導入結果和所述新的數據的索引更新所述當前索引；

根據從所述中間數據庫中獲取與更新后的所述當前索引對應的未導入數據，并將與更新后的所述當前索引對應的所述未導入數據導入目標數據庫。

在其中一個實施例中，所述將與所述當前索引對應的所述未導入數據導入所述目標數據庫，包括：

按照預設分批邏輯將與所述當前索引對應的所述未導入數據進行分批處理；

將分批處理后的所述未導入數據分批導入所述目標數據庫；

所述獲取與所述當前索引對應的所述未導入數據導入所述目標數據庫的綜合導入結果，包括：

獲取每一批所述未導入數據導入所述目標數據庫的批次導入結果，并根據所述批次導入結果得到綜合導入結果。

在其中一個實施例中，所述將與更新后的所述當前索引對應的所述未導入數據導入目標數據庫，包括：

統計與更新后的所述當前索引對應的所述未導入數據的條數，當與更新后的所述當前索引對應的所述未導入數據的條數大于0且小于預設條數時，將所述更新后的當前索引清空；

將與更新后的所述當前索引對應的所述未導入數據導入到目標數據庫中。

在其中一個實施例中，所述將與更新后的所述當前索引對應的所述未導入數據導入目標數據庫，包括：

統計與更新后的所述當前索引對應的所述未導入數據的條數，當與更新后的所述當前索引對應的所述未導入數據的條數大于等于預設條數時，將與更新后的所述當前索引對應的所述未導入數據導入到所述目標數據庫中，并獲取與更新后的所述當前索引對應的所述未導入數據導入到所述目標數據庫后的綜合導入結果后；繼續查詢所述中間數據庫中是否存在未從源數據庫導入至目標數據庫的新的數據的索引。