[發(fā)明專利]一種數(shù)據(jù)轉儲方法、設備、電子設備及存儲介質

在審

• 申請?zhí)枺?/td>: 202011197376.8
• 申請日: 2020-10-30
• 公開（公告）號: CN112380185A
• 公開（公告）日: 2021-02-19
• 發(fā)明（設計）人: 盧中華
• 申請（專利權）人: 中國人壽保險股份有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21
• 代理公司: 北京風雅頌專利代理有限公司 11403
• 代理人: 王剛

本說明書一個或多個實施例提供的一種數(shù)據(jù)轉儲方法、設備、電子設備及存儲介質，包括：根據(jù)轉儲數(shù)據(jù)量對待轉儲數(shù)據(jù)進行數(shù)據(jù)分割，生成第一轉儲數(shù)據(jù)；對第一轉儲數(shù)據(jù)進行數(shù)據(jù)轉儲，判斷數(shù)據(jù)庫運行負荷是否小于預設閾值；若是，則提高轉儲數(shù)據(jù)量，在第一轉儲數(shù)據(jù)轉儲完成后，對剩余待轉儲數(shù)據(jù)重新進行數(shù)據(jù)分割，生成第二轉儲數(shù)據(jù)，對第二轉儲數(shù)據(jù)進行數(shù)據(jù)轉儲。本說明書一個或多個實施例通過對待轉儲數(shù)據(jù)進行分割，并依次對分割后的數(shù)據(jù)轉儲，從而避免大量數(shù)據(jù)對數(shù)據(jù)庫造成的沖擊，避免數(shù)據(jù)庫癱瘓，并可以在不影響數(shù)據(jù)庫功能情況下，盡量提高數(shù)據(jù)轉儲效率，并以此來控制海量轉儲數(shù)據(jù)對數(shù)據(jù)庫內容及回滾空間的占用量，實現(xiàn)可控的數(shù)據(jù)轉移。

技術領域

本說明書一個或多個實施例涉及數(shù)據(jù)存儲技術領域，尤其涉及一種數(shù)據(jù)轉儲方法、設備、電子設備及存儲介質。

背景技術

隨著信息網(wǎng)絡技術與智能設備技術的不斷發(fā)展，各種系統(tǒng)中存在的數(shù)據(jù)量也出現(xiàn)了成倍增加的情況。伴隨時間的推移、業(yè)務功能的發(fā)展及海量數(shù)據(jù)的出現(xiàn)必然帶來數(shù)據(jù)庫應用運行的壓力，數(shù)據(jù)轉儲是減少運行數(shù)據(jù)庫數(shù)據(jù)壓力，提高應用運行效率的有效方法。

但當大量數(shù)據(jù)需要轉移時，依據(jù)現(xiàn)有的方式進行數(shù)據(jù)轉儲會造成數(shù)據(jù)庫內存占用量劇增，數(shù)據(jù)庫回滾空間、臨時空間占滿，嚴重時導致數(shù)據(jù)庫癱瘓，不能支持應用的日常使用。

發(fā)明內容

有鑒于此，本說明書一個或多個實施例的目的在于提出一種數(shù)據(jù)轉儲方法、設備、電子設備及存儲介質，以解決大量數(shù)據(jù)需要轉移時，會占用大量數(shù)據(jù)庫內存空間，使數(shù)據(jù)庫無法正常使用的問題。

基于上述目的，本說明書一個或多個實施例提供了一種數(shù)據(jù)轉儲方法，包括：

根據(jù)轉儲數(shù)據(jù)量對待轉儲數(shù)據(jù)進行數(shù)據(jù)分割，生成第一轉儲數(shù)據(jù)；

對所述第一轉儲數(shù)據(jù)進行數(shù)據(jù)轉儲，判斷數(shù)據(jù)庫運行負荷是否小于預設閾值；

若是，則提高所述轉儲數(shù)據(jù)量，在所述第一轉儲數(shù)據(jù)轉儲完成后，對剩余所述待轉儲數(shù)據(jù)重新進行數(shù)據(jù)分割，生成第二轉儲數(shù)據(jù)，對所述第二轉儲數(shù)據(jù)進行數(shù)據(jù)轉儲。

在一些實施方式中，所述對所述第一轉儲數(shù)據(jù)進行數(shù)據(jù)轉儲，包括：

在進行數(shù)據(jù)轉儲時，監(jiān)控處理器內存占比及數(shù)據(jù)庫內存占比；

當所述處理器內存占比超過第一閾值時，和/或，當所述數(shù)據(jù)庫內存占比超過第二閾值時，執(zhí)行預設操作。

在一些實施方式中，所述執(zhí)行預設操作，包括：

根據(jù)所述處理器內存占比和/或所述數(shù)據(jù)庫內存占比，降低所述轉儲數(shù)據(jù)量；

或

終止所述數(shù)據(jù)轉儲。

在一些實施方式中，所述對所述第二轉儲數(shù)據(jù)進行數(shù)據(jù)轉儲，包括：

所述第一轉儲數(shù)據(jù)的所述數(shù)據(jù)轉儲與所述第二轉儲數(shù)據(jù)的所述數(shù)據(jù)轉儲之間，設置有間隔時長。

在一些實施方式中，所述間隔時長，具體為：

確定轉儲時間段及初始間隔時長；

根據(jù)歷史轉儲記錄，判斷所述數(shù)據(jù)轉儲在所述初始間隔時長下能否在所述轉儲時間段內完成；

若否，則降低所述初始間隔時長生成所述間隔時長，以使所述數(shù)據(jù)轉儲在所述間隔時長下能夠在所述轉儲時間段內完成。

在一些實施方式中，所述轉儲數(shù)據(jù)量，具體為：

確定轉儲時間段及初始轉儲數(shù)據(jù)量；

根據(jù)歷史轉儲記錄，判斷所述數(shù)據(jù)轉儲在所述初始轉儲數(shù)據(jù)量下能否在所述轉儲時間段內完成；