[發明專利]數據持久化處理方法、裝置及數據庫系統

有效

• 申請號: 201210133474.4
• 申請日: 2012-05-02
• 公開（公告）號: CN102750317A
• 公開（公告）日: 2012-10-24
• 發明（設計）人: 威諾斯;彭勇飛;楊上德
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06F12/00
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 劉芳

技術領域

本發明涉及計算機技術領域，特別是涉及一種數據持久化處理方法、裝置及數據庫系統。

背景技術

內存相對于磁盤能夠提供較高的吞吐量和快速響應，數據庫系統通常將某些數據如讀寫較為繁瑣的數據優先存放到內存中，以提高數據讀寫速度，實現高速緩存。數據庫系統通常是以頁作為高速緩存的單位，當進程修改了高速緩存里的數據時，該頁就被內核標記為臟頁（Dirty?Page），數據庫系統將會在合適的時間把臟頁的數據寫到磁盤中去，以保持高速緩存中的數據和磁盤中的數據是一致的。

檢查點（Checkpoint）機制是使數據庫能夠在發生故障之后進行恢復的機制。傳統的檢查點機制也稱為全量檢查點機制，是一次性將檢查點隊列中的所有臟頁轉存到磁盤中。在使用該檢查點機制進行數據持久化處理時，為保證內存與磁盤數據的一致性，需要在整個數據持久化處理期間鎖定整個檢查點隊列，也就是說，用戶的正常事務操作將被阻止比較長的一段時間。

為了克服傳統的全量檢查點機制影響正常事務執行的弊端，名為“模糊檢查點”的機制被提了出來。模糊檢查點機制旨在將產生的臟頁逐步刷到磁盤中，以此減少了因數據持久化處理對用戶正常事務操作造成的影響，但是具體如何實現，現有技術尚缺少存少有效的解決方案。

發明內容

本發明實施例提供一種數據持久化處理方法、裝置及數據庫系統，用以在一定程度上提高臟頁轉存的效率。

一方面，本發明實施例提供了一種數據持久化處理方法，包括：

在數據庫系統內存每次產生臟頁時，將產生的各臟頁分別對應的頁標識加入檢查點隊列；

在所述檢查點隊列中確定活動組和當前組；所述檢查點隊列中與當前準備轉存到磁盤的多個臟頁分別對應的頁標識，組成所述活動組；所述檢查點隊列中新加入的臟頁所插入的組為所述當前組；

在預設的檢查點發生時機，將所述活動組包括的各頁標識對應的臟頁依次轉存到磁盤的數據文件；

如果完成所述活動組相關的臟頁轉存，則在所述檢查點隊列中確定下一所述活動組，并在所述檢查點發生時機，將下一所述活動組包括的各頁標識對應的臟頁依次轉存到所述磁盤的數據文件。

另一方面，本發明實施例還提供了一種數據持久化處理裝置，包括：

檢查點隊列維護單元，用于在數據庫系統內存每次產生臟頁時，將產生的各臟頁分別對應的頁標識加入檢查點隊列；

分組處理單元，用于在所述檢查點隊列中確定活動組和當前組；所述檢查點隊列中與當前準備轉存到磁盤的多個臟頁分別對應的頁標識，組成所述活動組；所述檢查點隊列中新加入的臟頁所插入的組為所述當前組；

臟頁批量轉存單元，用于在預設的檢查點發生時機，將所述活動組包括的各頁標識對應的臟頁依次轉存到所述磁盤的數據文件；

所述分組處理單元，還用于如果完成所述活動組相關的臟頁轉存，則在所述檢查點隊列中確定下一所述活動組；

所述臟頁批量轉存單元，還用于在所述檢查點發生時機，將下一所述活動組包括的各頁標識對應的臟頁依次轉存到所述磁盤的數據文件。

再一方面，本發明實施例還提供了一種數據庫系統，包括：磁盤文件、內存數據庫以及數據庫管理系統，所述數據庫管理系統用于管理所述內存數據庫中存儲的數據，所述數據庫管理系統包括上述的數據持久化處理裝置，所述數據持久化處理裝置用于將內存數據庫中存儲的數據轉存到所述磁盤文件中。

本發明實施例提供的數據持久化處理方法和裝置及數據庫系統，動態維護一檢查點隊列，將檢查點隊列中與當前準備轉存到磁盤的多個臟頁對應的頁標識作為活動組，檢查點隊列新加入的臟頁所插入的組為當前組，每一檢查點發生時機，將一活動組包括的各頁標識對應的臟頁依次轉存到磁盤的數據庫中，完成一活動組包括的各頁標識對應的臟頁的轉存之后，在檢查點隊列中確定下一活動組，以在下一檢查點發生時機，將該下一活動組包括的各頁標識對應的臟頁依次轉存到磁盤的數據文件。如此循環處理，實現了按檢查點發生時機分組批量向磁盤轉存臟頁，由此在臟頁轉存對正常事務操作產生較小影響的基礎上，提高了臟頁轉存的效率。

附圖說明

為了更清楚地說明本發明實施例或現有技術中的技術方案，下面將對實施例或現有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發明的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動性的前提下，還可以根據這些附圖獲得其他的附圖。

圖1為本發明實施例提供的一種數據持久化處理方法流程圖；