[發明專利]實時數據存儲結構、數據寫入方法及數據讀取方法

有效

• 申請號: 201710041983.7
• 申請日: 2017-01-20
• 公開（公告）號: CN106970935B
• 公開（公告）日: 2021-02-02
• 發明（設計）人: 武愛斌;魏小慶;劉培慶;胡杰英;黃俊
• 申請（專利權）人: 朗坤智慧科技股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/2458
• 代理公司: 南京鐘山專利代理有限公司 32252
• 代理人: 戴朝榮

1.一種實時數據存儲結構的數據寫入方法，其特征在于：包括如 下步驟：

將實時數據以記錄塊的形式按照時間順序添加到數據文件，并對每一所述記錄塊對應產生唯一標識；

每一所述記錄塊還包括與所述實時數據對應設置的數據包頭，所述數據包頭包括標簽點id、數據部分開始時間、數據部分結束時間、及上一個記錄塊的唯一標識；

所述標簽點id標識所述記錄塊的實時數據以辨識所述實時數據，所述數據部分開始時間和所述數據部分結束時間標識所述記錄塊的數據起止時間；

所述唯一標識包括所述實時數據在數據文件中的偏移量及自身的長度；

將所述數據文件中最后一個所述記錄塊中實時數據的唯一標識存儲在索引表中，并按照時間順序組織所述索引表形成索引文件；

所述索引文件是按照所述標簽點id和所述實時數據的時間區分，并將所述唯一標識存入相應的索引id的時間段內；

每一所述索引表包括多個按照時間順序組織的索引項，每一所述索引項包括多個按時間順序組織的索引，每一所述索引存儲設定時間內最后一個所述記錄塊中實時數據的唯一標簽。

2.根據權利要求1所述的數據寫入方法，其特征在于：在將所述實時數據以記錄塊的形式按照時間順序添加到數據文件，并對每一所述記錄塊對應產生唯一標識步驟之前還包括步驟：

將獲取的緩存數據按照時間戳進行排序；

對排序后的所述緩存數據按照設定的時間間隔進行壓縮打包，形成待存儲的實時數據。

3.一種實時數據存儲結構的數據讀取方法，其特征在于：包括如下步驟：

將數據文件按照時間順序依次連續設置n個記錄塊，每一所述記錄塊包括具有設定時間間隔內的實時數據，且每一所述記錄塊對應產生一個唯一標識，n為正整數；

每一所述記錄塊還包括與所述實時數據對應設置的數據包頭，所述數據包頭包括標簽點id、數據部分開始時間、數據部分結束時間、及上一個記錄塊的唯一標識；

所述標簽點id標識所述記錄塊的實時數據以辨識所述實時數據，所述數據部分開始時間和所述數據部分結束時間標識所述記錄塊的數據起止時間；所述唯一標識包括所述實時數據在數據文件中的偏移量及自身的長度；

根據數據文件生成對應的索引文件，所述索引文件包括多個按時間順序組織的索引表，每一所述索引表按照時間順序對應記錄所述數據文件中最后一個所述記錄塊中實時數據的唯一標識；

所述索引文件是按照所述標簽點id和所述實時數據的時間區分，并將所述唯一標識存入相應的索引id的時間段內；每一所述索引表包括多個按照時間順序組織的索引項，每一所述索引項包括多個按時間順序組織的索引，每一所述索引存儲設定時間內最后一個所述記錄塊中實時數據的唯一標簽；

根據待讀取數據的開始時間和結束時間按照時間順序檢索索引文件，以獲取與所述待讀取數據相對應的唯一標識；

根據所述唯一標識讀取數據文件中記錄塊的實時數據。

4.一種根據權利要求3所述的數據讀取方法，其特征在于：根據待讀取數據的開始時間和結束時間按照時間順序檢索索引文件步驟包括如下步驟：

檢索所述待讀取數據的開始時間所在索引內的標識，判斷所述索引內是否存在所述結束時間；

如果是，則獲得所述待讀取數據的唯一標識；

如果否，則所述開始時間加所述索引的時間長度，并返回檢索所述待讀取數據的開始時間所在索引內的標識步驟，按照時間順序檢索下一個所述索引。