[發明專利]一種數據庫的數據遷移方法、裝置及設備有效
| 申請號: | 201910271292.5 | 申請日: | 2019-04-04 |
| 公開(公告)號: | CN110008200B | 公開(公告)日: | 2021-04-13 |
| 發明(設計)人: | 丁曉波;禇占峰;江峰 | 申請(專利權)人: | 杭州數夢工場科技有限公司 |
| 主分類號: | G06F16/21 | 分類號: | G06F16/21;G06F16/23;G06F16/27 |
| 代理公司: | 北京集佳知識產權代理有限公司 11227 | 代理人: | 羅滿 |
| 地址: | 310024 浙江省杭州市*** | 國省代碼: | 浙江;33 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 數據庫 數據 遷移 方法 裝置 設備 | ||
本發明公開了一種數據庫的數據遷移方法、裝置、設備及計算機可讀存儲介質,該方法包括:確定需實現數據遷移的存儲單元為源單元,需將源單元的數據遷移至的存儲單元為目的單元,并將源單元的數據遷移至目的單元中;獲取遷移開始至完成的過程中源單元產生的增量數據為第一增量數據,忽略類型為添加且目的單元中存在的第一增量數據,及類型為刪除且目的單元中不存在的第一增量數據,并將其余的第一增量數據寫入至目的單元中;獲取遷移完成后源單元產生的增量數據為第二增量數據,并將第二增量數據寫入至目的單元中。本申請不僅保證了目的單元及源單元的數據一致性,且無需暫停源單元的各項業務,因此不會對源單元及對應數據庫的業務持續性造成影響。
技術領域
本發明涉及數據庫技術領域,更具體地說,涉及一種數據庫的數據遷移方法、裝置、設備及計算機可讀存儲介質。
背景技術
數據庫是計算機軟件中非常核心的組成部分,當應用規模日漸增大,業務逐漸廣泛,數據庫的規模也逐漸增大,對性能的要求也越來越高。單數據庫節點在業務實現、性能、業務可靠度的角度可能滿足不了上層應用,這是就要用到數據庫實時同步技術。
發明內容
本發明的目的是提供一種數據庫的數據遷移方法、裝置、設備及計算機可讀存儲介質,能夠避免對需要實現數據遷移的數據庫的業務持續性造成影響的前提下實現數據庫實時同步技術。
為了實現上述目的,本發明提供如下技術方案:
一種數據庫的數據遷移方法,包括:
確定需實現數據遷移的存儲單元為源單元,需將所述源單元的數據遷移至的存儲單元為目的單元,并將所述源單元的數據遷移至所述目的單元中;
獲取所述遷移開始至完成的過程中所述源單元產生的增量數據為第一增量數據,忽略類型為添加且所述目的單元中存在的第一增量數據,及類型為刪除且所述目的單元中不存在的第一增量數據,并將其余的第一增量數據寫入至所述目的單元中;
獲取所述遷移完成后所述源單元產生的增量數據為第二增量數據,并將所述第二增量數據寫入至所述目的單元中。
優選的,將所述源單元的數據遷移至所述目的單元中之前,還包括:
查詢并記錄所述源單元當前的系統改變號值為第一系統改變號值;其中,所述系統改變號值為與所述源單元中對應時刻具有的全部數據相對應的標識值;將所述源單元的數據遷移至所述目的單元中之后,還包括:
查詢并記錄所述源單元當前的系統改變號值為第二系統改變號值;
獲取所述遷移開始至完成的過程中所述源單元產生的增量數據,包括:
獲取所述源單元實時的系統改變號值在第一系統改變號值和第一系統改變號值之間時對應產生的所述源單元的增量數據,為所述遷移開始至完成的過程中所述源單元產生的增量數據。
優選的,判斷所述目的單元中是否存在任一增量數據,包括:
判斷任一增量數據的標識是否存在于全量數據標識集合中,如果是,則確定所述目的單元中存在該任一增量數據,否則,則確定所述目的單元中不存在該任一增量數據,其中,所述全量數據標識集合為將源單元的數據遷移至所述目的單元的過程中記錄的遷移的全部數據的標識的集合。
優選的,所述標識為ROWID。
優選的,獲取增量數據,包括:
利用所述存儲單元對應數據庫的LogMinr抓取增量數據日志,并基于所述增量數據日志獲取對應的增量數據。
優選的,將所述源單元的數據遷移至所述目的單元中之后,還包括:
輸出已經完成存量遷移的提示信息。
優選的,所述源單元及所述目的單元均為數據庫表。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于杭州數夢工場科技有限公司,未經杭州數夢工場科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910271292.5/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





