[發明專利]一種數據處理方法和裝置在審
| 申請號： | 201811231230.3 | 申請日： | 2018-10-22 |
| 公開（公告）號： | CN109521957A | 公開（公告）日： | 2019-03-26 |
| 發明（設計）人： | 李杰;張在貴 | 申請（專利權）人： | 鄭州云海信息技術有限公司 |
| 主分類號： | G06F3/06 | 分類號： | G06F3/06 |
| 代理公司： | 北京集佳知識產權代理有限公司 11227 | 代理人： | 王寶筠 |
| 地址： | 450018 河南省鄭州市*** | 國省代碼： | 河南;41 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 待處理數據 讀取 緩存池 緩存數據 數據處理 寫入 分布式存儲系統 存儲設備構建 數據讀取效率 方法和裝置 存儲設備 讀取效率 目標數據 內存設備 命中率 時延 存儲 查找 申請 | ||
1.一種數據處理方法，其特征在于，所述方法包括：
在緩存池中查找待處理數據；所述緩存池中存儲有緩存數據，所述緩存數據在向分布式存儲系統中寫入目標數據時寫入所述緩存池，所述緩存池基于大于或等于100GB的存儲設備構建而成；
讀取查找到的所述待處理數據。
2.根據權利要求1所述的方法，其特征在于，所述方法還包括：
若緩存池中不存在所述待處理數據，則從所述分布式存儲系統中讀取所述待處理數據，將所述待處理數據寫入緩存池中。
3.根據權利要求1所述的方法，其特征在于，所述方法還包括：
在所述緩存池的利用率超過預設值時，刪除較舊的預設數據的緩存數據；和/或，
刪除存儲時間超過預設時間閾值的緩存數據。
4.根據權利要求1-3任意一項所述的方法，其特征在于，所述緩存數據為單副本數據。
5.根據權利要求1-3任意一項所述的方法，其特征在于，所述緩存數據與所述目標數據相同。
6.根據權利要求1-3任意一項所述的方法，其特征在于，所述緩存數據為所述目標數據中的部分數據。
7.根據權利要求1-3任意一項所述的方法，其特征在于，所述存儲設備包括固態硬盤、隨機存儲器或硬盤驅動器。
8.一種數據處理裝置，其特征在于，所述裝置包括：
查找單元，用于在緩存池中查找待處理數據；所述緩存池中存儲有緩存數據，所述緩存數據在向分布式存儲系統中寫入目標數據時寫入所述緩存池，所述緩存池基于大于或等于100GB的存儲設備構建而成；
讀取單元，用于讀取查找到的所述待處理數據。
9.根據權利要求8所述的裝置，其特征在于，所述裝置還包括：
讀寫單元，用于若緩存池中不存在所述待處理數據，則從所述分布式存儲系統中讀取所述待處理數據，將所述待處理數據寫入緩存池中。
10.根據權利要求8所述的裝置，其特征在于，所述裝置還包括：
刪除單元，用于在所述緩存池的利用率超過預設值時，刪除較舊的預設數據的緩存數據；和/或，
刪除存儲時間超過預設時間閾值的緩存數據。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于鄭州云海信息技術有限公司，未經鄭州云海信息技術有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201811231230.3/1.html，轉載請聲明來源鉆瓜專利網。
