[發明專利]海量數據的處理方法、提取方法以及處理裝置

在審

• 申請號: 201710033485.8
• 申請日: 2017-01-18
• 公開（公告）號: CN106802952A
• 公開（公告）日: 2017-06-06
• 發明（設計）人: 何健輝;楊燕清;張浚;李紹良
• 申請（專利權）人: 廣東睿江云計算股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京品源專利代理有限公司11332
• 代理人: 孟金喆,胡彬

1.一種海量數據的處理方法，其特征在于，包括：

響應于提取請求，從數據庫中獲取與所述提取請求對應的數據需求總量；

根據單次需求量以及數據需求總量，對數據庫中的數據進行依序分組；

在提取出對應于提取請求的第一組數據后，根據組序依序對數據庫中位于該組數據之后的數據進行緩存。

2.根據權利要求1所述的方法，其特征在于，在步驟“根據單次需求量以及數據需求總量，對數據庫中的數據進行依序分組”包括：

設置單次需求量的數據量。

3.根據權利要求1所述的方法，其特征在于，在步驟“在提取出對應于提取請求的第一組數據后，根據分組依序對數據庫中位于該組數據之后的數據進行緩存”之后還包括：

響應于需求請求，判斷與該需求請求對應的數據的數據位置。

4.根據權利要求3所述的方法，其特征在于，在步驟“響應于需求請求，判斷與該需求請求對應的數據的數據位置”包括：

如果與該需求請求對應的數據的數據位置位于完成的緩存的數據之內，則從數據庫中提取與需求請求對應的該組數據。

5.根據權利要求4所述的方法，其特征在于，在步驟“如果與該需求請求對應的數據的數據位置位于完成的緩存的數據之內，則從數據庫中提取與需求請求對應的該組數據”包括：

根據組序依序對數據庫中位于對應于所述需求請求的數據之后的該組數據進行緩存。

6.根據權利要求3所述的方法，其特征在于，在步驟“響應于需求請求，判斷與該需求請求對應的數據的數據位置”包括：

如果與該需求請求對應的數據的數據位置位于與所述提取請求對應的數據之外，則響應于需求請求，重新對數據庫中的數據進行分組。

7.一種海量數據的提取方法，其特征在于，包括：

判斷與提取請求對應的數據是否位于緩存服務器中；

如果與提取請求對應的數據位于緩存服務器中，則提取與該提取請求對應的一組數據，并且在提取之后盡可能地依組序緩存位于該組數據之后的數據。

8.根據權利要求7所述的方法，其特征在于，包括：

如果與提取請求對應的數據不在緩存服務器中，則在提取出一次所需的數據之后，對數據庫中的數據根據組序依序緩存。

9.一種海量數據的處理裝置，其特征在于，包括：

獲取模塊，其用于響應于提取請求，從數據庫中獲取與所述提取請求對應的數據需求總量；

分組模塊，其用于根據單次需求量以及數據需求總量，對數據庫中的數據進行依序分組；

緩存模塊，其用于在提取出對應于提取請求的第一組數據后，根據組序依序對數據庫中位于該組數據之后的數據進行緩存。

10.根據權利要求9所述的海量數據的處理裝置，其特征在于，包括：

提取模塊，其用于提取出緩存模塊中的數據。