[發(fā)明專利]一種加速數(shù)據(jù)處理效率的方法及數(shù)據(jù)庫

在審

• 申請?zhí)枺?/td>: 202010418545.X
• 申請日: 2020-05-18
• 公開（公告）號: CN111752974A
• 公開（公告）日: 2020-10-09
• 發(fā)明（設(shè)計）人: 張遠(yuǎn)斌
• 申請（專利權(quán)）人: 蘇州浪潮智能科技有限公司
• 主分類號: G06F16/2455
• 分類號: G06F16/2455;G06F16/21;G06F16/2453
• 代理公司: 濟南誠智商標(biāo)專利事務(wù)所有限公司 37105
• 代理人: 黃曉燕

1.一種加速數(shù)據(jù)處理效率的方法，其特征是，所述方法包括以下步驟：

將數(shù)據(jù)庫SGA中的buffer cache進行邏輯分類，形成內(nèi)存buffer cache、AEP和硬盤三層架構(gòu)；

向數(shù)據(jù)庫發(fā)起寫請求后，數(shù)據(jù)庫dbwr進程將寫請求要求更新的數(shù)據(jù)寫入到內(nèi)存buffercache層中，內(nèi)存buffer cache層通過新建進程將數(shù)據(jù)刷新到AEP層中，所述數(shù)據(jù)刷新依照write back機制。

2.根據(jù)權(quán)利要求1所述加速數(shù)據(jù)處理效率的方法，其特征是，所述write back機制具體為：

在AEP層被寫滿后，將被替換出的數(shù)據(jù)寫入硬盤層。

3.根據(jù)權(quán)利要求2所述加速數(shù)據(jù)處理效率的方法，其特征是，所述被替換出的數(shù)據(jù)為冷數(shù)據(jù)。

4.根據(jù)權(quán)利要求2所述加速數(shù)據(jù)處理效率的方法，其特征是，所述AEP層在處理I/O請求時，首先區(qū)別當(dāng)前I/O的類型，對于順序I/O，通過硬盤層處理，對于隨機I/O，通過AEP層進行緩存。

5.根據(jù)權(quán)利要求1所述加速數(shù)據(jù)處理效率的方法，其特征是，所述AEP層進行數(shù)據(jù)處理時，采用并行I/O，通過細(xì)粒度的同步鎖機制增加I/O過程的并行性。

6.根據(jù)權(quán)利要求1所述加速數(shù)據(jù)處理效率的方法，其特征是，所述新建進程的刷新過程包括：

根據(jù)請求命中緩存的情況，選擇對應(yīng)的處理分支，所述處理分支包括AEP層和硬盤層；

在讀未命中情況下，硬盤讀完成后，將從硬盤讀取的數(shù)據(jù)寫回AEP層，在寫未命中情況下，寫AEP完成后，進行元數(shù)據(jù)的更新；

將選擇處理分支的I/O提交到硬盤層，轉(zhuǎn)發(fā)至設(shè)備驅(qū)動，完成數(shù)據(jù)讀寫；

針對每個請求進行數(shù)據(jù)清理，包括對臟塊做回收。

7.一種數(shù)據(jù)庫，其特征是，所述數(shù)據(jù)庫包括：

邏輯分類單元，用于將SGA中的buffer cache進行邏輯分類，形成內(nèi)存buffer cache、AEP和硬盤三層架構(gòu)；

數(shù)據(jù)處理單元，向數(shù)據(jù)庫發(fā)起寫請求后，調(diào)用數(shù)據(jù)庫dbwr進程將寫請求要求更新的數(shù)據(jù)寫入到內(nèi)存buffer cache層中，內(nèi)存buffer cache層通過新建進程將數(shù)據(jù)刷新到AEP層中，所述數(shù)據(jù)刷新依照write back機制。

8.根據(jù)權(quán)利要求7所述的數(shù)據(jù)庫，其特征是，所述新建進程包括：

調(diào)度模塊，根據(jù)請求命中緩存的情況，選擇對應(yīng)的處理分支，所述處理分支包括AEP層和硬盤層；

邏輯處理模塊，在讀未命中情況下，硬盤讀完成后，將從硬盤讀取的數(shù)據(jù)寫回AEP層，在寫未命中情況下，寫AEP完成后，回調(diào)到邏輯處理模塊進行元數(shù)據(jù)的更新；

底層存儲模塊，將調(diào)度模塊處理的I/O提交到硬盤層，轉(zhuǎn)發(fā)至設(shè)備驅(qū)動，完成數(shù)據(jù)讀寫；

后臺清理模塊，針對每個請求進行數(shù)據(jù)清理，包括對臟塊做回收。

9.根據(jù)權(quán)利要求7所述的數(shù)據(jù)庫，其特征是，所述數(shù)據(jù)庫為K-DB數(shù)據(jù)庫。