[發明專利]一種數據存儲方法、設備及計算機存儲介質

有效

• 申請號: 201711490599.1
• 申請日: 2017-12-30
• 公開（公告）號: CN108196795B
• 公開（公告）日: 2020-09-04
• 發明（設計）人: 施文進;施俊
• 申請（專利權）人: 惠龍易通國際物流股份有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京智橋聯合知識產權代理事務所(普通合伙) 11560
• 代理人: 商曉莉

本發明的實施方式提供了一種數據存儲方法、設備以及計算機存儲介質，其中，所述方法應用于采用分布式架構的存儲節點中，所述存儲節點包含非易失性隨機訪問存儲器NVRAM和NVMe SSD組成的二級存儲架構；其中：在確定出接收到IO請求的類型是寫請求時，將所述寫請求對應的數據寫入到所述NVRAM中的數據塊中，并修改所述數據塊的標識，用于解決磁盤低速的I0性能對數據庫系統帶來的影響，從而提升數據庫的整體性能。

技術領域

本發明涉及數據處理技術領域，更具體地，本發明的涉及一種數據存儲方法、設備及計算機存儲介質。

背景技術

本部分旨在為權利要求書中陳述的本發明的實施方式提供背景或上下文。此處的描述不因為包括在本部分中就承認是現有技術。

傳統數據庫大部分采用小機和盤陣方式，但是隨著互聯網技術的發展，數據量和數據分析需求劇增，傳統IOE架構不論性能和成本都難以為繼。分布式架構、云計算等新技術，逐漸在新一代的數據庫系統中得到應用，解決了計算性能需求，能夠實現橫向線性擴展，但是IO訪問性能由于外圍存儲速度受限，一直是數據庫系統的性能瓶頸，特別是針對OLTP在線交易型數據庫，對IO時延要求很高，直接影響用戶的最終體驗。

在現有的數據庫系統中，采用的存儲系統有兩種方式：磁盤整列和分布式存儲。磁盤整列存在機頭性能瓶頸，不發線性擴展，需要一次為未來3-5年IT投資買單。分布式存儲，采用基于x86服務器，在上面部署分布式存儲軟件，性能線性增長，在線靈活擴容。而目前分布式存儲多采用全閃存或混合存儲架構，對于性能最好的全閃存架構，IO延時是幾百us，針對IO時延要求很高的應用，也會影響用戶體驗。因此，如何能夠提高數據庫的性能，解決磁盤低速的I0性能對數據庫系統帶來的影響，成為現有技術亟需解決的問題。

發明內容

本發明提出了一種數據存儲方法、設備以及計算機存儲介質，解決磁盤低速的I0性能對數據庫系統帶來的影響，從而提升數據庫的整體性能。

一種數據存儲方法，所述方法應用于采用分布式架構的存儲節點中，所述存儲節點包含非易失性隨機訪問存儲器NVRAM和NVMe SSD組成的二級存儲架構；其中：在確定出接收到IO請求的類型是寫請求時，將所述寫請求對應的數據寫入到所述NVRAM中的數據塊中，并修改所述數據塊的標識。

在接收到IO請求之前，還包括：將NVRAM中用于存儲數據的緩存隊列劃分至少一個數據塊，其中每個數據塊包含有效數據部分和數據塊的標識，所述數據塊標識初始值為設定值。

將所述寫請求對應的數據寫入到所述NVRAM中的數據塊中，并修改所述數據塊的標識，包括：在所述NVRAM中存儲的寫請求對應的數據塊，若所述數據塊是所述NVRAM中的緩存隊列中最后一個數據塊，且所述NVRAM中的緩存隊列中所有數據塊的標識均為相同時，將除最后一個數據塊的其它數據塊的標識設置為初始值，修改最后一個數據塊的標識為設定值。

還包括：獲取NVMe SSD中存儲的數據；將所述NVMe SSD中存儲的數據寫入到所述NVRAM中的緩存隊列中的數據塊中，并修改所述數據塊的標識。

一種數據存儲設備，所述設備應用于采用分布式架構的存儲節點中，所述存儲節點包含非易失性隨機訪問存儲器NVRAM和NVMe SSD組成的二級存儲架構；包括：接收模塊，用于接收IO請求；處理模塊，用于在確定出接收到IO請求的類型是寫請求時，將所述寫請求對應的數據寫入到所述NVRAM中的數據塊中，并修改所述數據塊的標識。

所述處理模塊，還用于將NVRAM中用于存儲數據的緩存隊列劃分至少一個數據塊，其中每個數據塊包含有效數據部分和數據塊的標識，所述數據塊標識初始值為設定值。