[發明專利]一種數據管理的方法及裝置、數據庫一體機在審
| 申請號: | 201611014621.0 | 申請日: | 2016-11-15 |
| 公開(公告)號: | CN108073636A | 公開(公告)日: | 2018-05-25 |
| 發明(設計)人: | 郭遠勝 | 申請(專利權)人: | 中國移動通信集團公司;中國移動通信集團湖南有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30 |
| 代理公司: | 北京路浩知識產權代理有限公司 11002 | 代理人: | 李相雨 |
| 地址: | 100033 *** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 存儲介質 熱點數據 數據庫 存儲空間 讀寫 數據管理 存儲 一體機 預設 數據存取過程 讀取 命中率 占用 | ||
本發明的實施例公開了一種數據管理的方法及裝置、數據庫一體機,該方法包括獲取預設數據庫中存儲在第一存儲介質中的熱點數據,以及所述熱點數據占用的第一存儲空間;判斷所述預設數據庫的第二存儲介質中未被占用的第二存儲空間是否大于或等于所述第一存儲空間,若是,將所述熱點數據存儲至所述第二存儲介質中;其中,所述第二存儲介質在單位時間內的讀寫次數大于所述第一存儲介質在單位時間內的讀寫次數。這種方法將熱點數據轉移到IOPS較高的第二存儲介質中,以提高讀取數據庫中熱點數據的速度。同時避免了存儲在IOPS較低的第一存儲介質中的熱點數據的讀寫命中率低的問題,提高了數據存取過程效率。
技術領域
本發明數據庫優化技術領域,尤其是涉及一種數據管理的方法及裝置、數據庫一體機。
背景技術
數據庫一體機是為了適應不斷復雜的數據系統和越發龐大的數據規模而產生的軟硬件一體化產品,解決了數據庫應用硬件選型、系統安裝、數據庫調優、系統維護等復雜問題。
數據庫一體機的性能主要受限于存儲系統的IOPS(Input/Output OperationsPer Second,每秒進行讀寫(I/O)操作的次數),和磁盤數據訪問帶寬。傳統的數據庫一體機采用SAS(Serial Attached SCSI)磁盤,由于SAS機械磁盤訪問速度較慢,在數據庫一體機運行的過程中大量時間用于等待數據的傳輸,造成系統整體的數據處理能力較低。針對數據庫一體機數據傳輸速度慢的問題,通常采用PCIE SSD(PCI-Express,最新的總線和接口標準)存儲卡來解決。然而,由于PCIE SSD存儲卡容量有限,完全使用PCIE SSD存儲卡進行數據的存儲,無法滿足大容量的數據應用,其次,由于PCIE SSD存儲卡的成本較高,PCIESSD存儲卡的使用使得數據庫一體機的成本增加。
現有技術中存在使用PCIE SSD存儲卡和SAS機械磁盤組合進行數據存儲和讀取的數據庫一體機,其將經常讀寫的數據放置在PCIE SSD存儲卡中,其余數據放置在SAS機械磁盤中。由于數據內容存放位置預先固定,因此無法感知數據訪問內容的變化,當數據熱點變化時,系統無法自動判斷,造成數據讀寫命中率較低,嚴重影響數據庫一體機的性能。
在實現本發明實施例的過程中,發明人發現現有的使用PCIE SSD存儲卡和SAS機械磁盤組合進行數據存儲和讀取的數據庫一體機,存取速度慢、數據讀寫命中率較低,性能差。
發明內容
本發明所要解決的技術問題是如何解決由PCIE SSD存儲卡和SAS機械磁盤組合進行數據存儲和讀取的數據庫一體機中,存取速度慢、數據讀寫命中率較低,性能差的問題。
針對以上技術問題,本發明的實施例提供了一種數據管理的方法,包括:
獲取預設數據庫中存儲在第一存儲介質中的熱點數據,以及所述熱點數據占用的第一存儲空間;
判斷所述預設數據庫的第二存儲介質中未被占用的第二存儲空間是否大于或等于所述第一存儲空間,若是,將所述熱點數據存儲至所述第二存儲介質中;
其中,所述第二存儲介質在單位時間內的讀寫次數大于所述第一存儲介質在單位時間內的讀寫次數。
可選地,還包括:
若判斷獲知所述第二存儲空間小于所述第一存儲空間,則獲取存儲所述第二存儲介質中訪問頻率低于第一閾值的非熱點數據,將所述非熱點數據存儲至所述第一存儲介質中后,清空所述非熱點數據在所述第二存儲介質中的存儲空間,直到所述第二存儲空間大于或等于所述第一存儲空間后,將所述熱點數據存儲至所述第二存儲介質中。
可選地,還包括:
在向所述預設數據庫中添加新數據時,若所述新數據的數據類型為索引文件,則將所述新數據存儲至所述第二存儲介質中。
可選地,所述熱點數據為在訪問頻率高于第二閾值的數據。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于中國移動通信集團公司;中國移動通信集團湖南有限公司,未經中國移動通信集團公司;中國移動通信集團湖南有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201611014621.0/2.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種地圖渲染方法及裝置
- 下一篇:一種建立鲆鰈魚類經濟性狀信息數據庫的方法





