[發明專利]大數據的寫入方法和裝置、讀取方法和裝置及處理系統

有效

• 申請號: 201410175583.1
• 申請日: 2014-04-28
• 公開（公告）號: CN103970844B
• 公開（公告）日: 2017-11-21
• 發明（設計）人: 曾開榮
• 申請（專利權）人: 北京創世漫道科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06F3/06
• 代理公司: 北京潤澤恒知識產權代理有限公司11319
• 代理人: 趙娟

1.一種大數據的寫入方法，其特征在于，包括：

接收寫入請求；

依據所述寫入請求將所述大數據切分為多條子數據；所述多條子數據的長度一致，并且，所述多條子數據中相同字段對應的數據部分的相對位置固定；

分別將所述多條子數據寫入指定的存儲介質中；

在各條子數據中添加當前子數據在所述存儲介質中的存儲位置。

2.根據權利要求1所述的方法，其特征在于，還包括：

當需要更新一條或多條子數據時，從所述一條或多條子數據中提取其在存儲介質中的存儲位置；

在所述存儲位置上對所述一條或多條子數據進行更新。

3.一種大數據的讀取方法，其特征在于，所述大數據被切分為多條子數據，所述多條子數據的長度一致，并且，所述多條子數據中相同字段對應的數據部分的相對位置固定，各條子數據中包括當前子數據在存儲介質中的存儲位置，所述方法包括：

接收讀取請求；

依據所述讀取請求確定待讀取的一條或多條子數據；

從所述待讀取的一條或多條子數據中提取其在存儲介質中的存儲位置；

從所述存儲位置讀取所述一條或多條子數據。

4.根據權利要求3所述的方法，其特征在于，所述依據所述讀取請求確定待讀取的一條或多條子數據的步驟包括：

采用所述讀取請求遍歷所述多條子數據；

確定具有匹配字段的一條或多條子數據為待讀取的一條或多條子數據。

5.根據權利要求3所述的方法，其特征在于，所述依據所述讀取請求確定待讀取的一條或多條子數據的步驟包括：

采用所述讀取請求計算對應的一條或多條子數據的起始位置；

確定所述起始位置對應的一條或多條子數據為待讀取的一條或多條子數據。

6.一種大數據的寫入裝置，其特征在于，包括：

寫入請求接收模塊，用于接收寫入請求；

大數據切分模塊，用于依據所述寫入請求將所述大數據切分為多條子數據；所述多條子數據的長度一致，并且，所述多條子數據中相同字段對應的數據部分的相對位置固定；

多條子數據寫入模塊，用于分別將所述多條子數據寫入指定的存儲介質中；

存儲位置添加模塊，用于在各條子數據中添加當前子數據在所述存儲介質中的存儲位置。

7.根據權利要求6所述的裝置，其特征在于，包括：

第一存儲位置提取模塊，用于當需要更新一條或多條子數據時，從所述一條或多條子數據中提取其在存儲介質中的存儲位置；

更新模塊，用于在所述存儲位置上對所述一條或多條子數據進行更新。

8.一種大數據的讀取裝置，其特征在于，所述大數據被切分為多條子數據，所述多條子數據的長度一致，并且，所述多條子數據中相同字段對應的數據部分的相對位置固定，各條子數據中包括當前子數據在存儲介質中的存儲位置，所述裝置包括：

讀取請求接收模塊，用于接收讀取請求；

待讀取子數據確定模塊，用于依據所述讀取請求確定待讀取的一條或多條子數據；

第二存儲位置提取模塊，用于從所述待讀取的一條或多條子數據中提取其在存儲介質中的存儲位置；

子數據讀取模塊，用于從所述存儲位置讀取所述一條或多條子數據。

9.根據權利要求8所述的裝置，其特征在于，所述待讀取子數據確定模塊包括：

多條子數據遍歷子模塊，用于采用所述讀取請求遍歷所述多條子數據；

待讀取子數據確定子模塊，用于確定具有匹配字段的一條或多條子數據為待讀取的一條或多條子數據。

10.一種大數據的處理系統，其特征在于，包括大數據的寫入裝置及大數據的讀取裝置，其中，

所述大數據的寫入裝置包括：

接收寫入請求模塊，用于接收寫入請求；

切分大數據模塊，用于依據所述寫入請求將所述大數據切分為多條子數據；所述多條子數據的長度一致，并且，所述多條子數據中相同字段對應的數據部分的相對位置固定；

寫入多條子數據模塊，用于分別將所述多條子數據寫入指定的存儲介質中；

添加存儲位置模塊，用于在各條子數據中添加當前子數據在所述存儲介質中的存儲位置；

所述大數據的讀取裝置包括：

接收讀取請求模塊，用于接收讀取請求；

確定待讀取子數據模塊，用于依據所述讀取請求確定待讀取的一條或多條子數據；

提取存儲位置模塊，用于從所述待讀取的一條或多條子數據中提取其在存儲介質中的存儲位置；

讀取子數據模塊，用于從所述存儲位置讀取所述一條或多條子數據。