[發(fā)明專利]一種用于電網(wǎng)WAMS系統(tǒng)的時序數(shù)據(jù)存儲方法

在審

• 申請?zhí)枺?/td>: 201611265625.6
• 申請日: 2016-12-30
• 公開（公告）號: CN106844555A
• 公開（公告）日: 2017-06-13
• 發(fā)明（設計）人: 鄭曉露;周淳;朱恒;卜蕓
• 申請（專利權）人: 江蘇瑞中數(shù)據(jù)股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 南京知識律師事務所32207
• 代理人: 劉豐

1.一種用于電網(wǎng)WAMS系統(tǒng)的時序數(shù)據(jù)存儲方法，其特征在于：提供測點ID和時序數(shù)據(jù)結合的存儲模型、緩存和文件結合的雙層存儲架構、按小時獨立存儲的文件格式以及文件偏移量索引機制；

其中，測點ID和時序數(shù)據(jù)結合的存儲模型：

存儲模型結構為：<id,timestamp,<value₁,value₂,…,value_n>>，其中id表示該段數(shù)據(jù)對應的測點ID號；timestamp表示該段數(shù)據(jù)對應的時間標簽，即對應的秒數(shù)；value₁至value_n表示ID號為id的測點在第timestamp秒的n條數(shù)據(jù)；

緩存和文件結合的雙層存儲架構：

緩存結構：采用二維數(shù)組形式，其中一個維度表示測點ID，另外一個維度表示最新1分鐘的60秒，存儲所有測點最新1分鐘的數(shù)據(jù)，二維數(shù)組中的每個存儲單元存儲單個測點1秒中的n條數(shù)據(jù)；

文件結構：在文件中存儲所有測點1個小時的數(shù)據(jù)，文件中每個存儲單元存儲單個測點1分鐘的壓縮數(shù)據(jù)塊；

按小時獨立存儲的文件格式：設置若干個數(shù)據(jù)文件，每個數(shù)據(jù)文件用于存儲所有測點1個小時的數(shù)據(jù)，不同文件中數(shù)據(jù)時標互相不重復；

文件偏移量索引機制：為每個數(shù)據(jù)文件生成一個索引文件，即每個小時的數(shù)據(jù)均存在對應的索引文件，索引文件采用二維數(shù)組結構，其中一個維度表示測點ID，另一個維度表示每個小時的60分鐘，二維數(shù)組中的每個單元存儲一個偏移量，該偏移量表示對應測點ID在60分鐘中某分鐘的數(shù)據(jù)塊；

所述方法包括數(shù)據(jù)寫入和數(shù)據(jù)查詢兩個階段，所述數(shù)據(jù)寫入階段包括以下步驟：

S11接收測點最新1分鐘中第i秒鐘的時序數(shù)據(jù)，i＝(0,2,…,59)；

S12根據(jù)測點ID和第i秒鐘在緩存結構中找到接收數(shù)據(jù)緩存位置；

S13將接收到的時序數(shù)據(jù)復制到對應緩存位置中；

S14判斷該測點數(shù)據(jù)緩存時間是否超過1分鐘，如果是則進入S15，否則結束；

S15將緩存結構中該測點最新1分鐘內(nèi)時序數(shù)據(jù)壓縮，形成壓縮數(shù)據(jù)塊；

S16根據(jù)測點ID和最新1分鐘時間在文件結構中找到寫入位置；

S17將該測點最新1分鐘內(nèi)時序數(shù)據(jù)壓縮數(shù)據(jù)塊寫入到所述步驟S16中寫入位置中；

S18將所述步驟S16中寫入位置記錄到該數(shù)據(jù)文件對應的索引文件中。

2.根據(jù)權利要求1所述的用于電網(wǎng)WAMS系統(tǒng)的時序數(shù)據(jù)存儲方法，其特征在于：所述數(shù)據(jù)查詢階段包括以下步驟：

S21收到查詢請求，查詢請求包括測點ID信息和查詢時間段信息；

S22判斷查詢時間段是否在緩存中，如果是則進入S23，如果不是則進入S24；

S23根據(jù)查詢時間段從緩存中定位數(shù)據(jù)，返回數(shù)據(jù)結果，結束；

S24根據(jù)查詢開始時間找到歷史數(shù)據(jù)文件，讀取該歷史數(shù)據(jù)文件對應的索引文件；

S25在索引文件中查詢該測點在該時間段顯示的分鐘時間是否有值，如果沒有值則返回無值結束，如果有值則在歷史數(shù)據(jù)文件中根據(jù)測點ID信息和查詢時間段信息讀取數(shù)據(jù)塊；

S26將讀取的數(shù)據(jù)塊解壓縮，返回數(shù)據(jù)結果，結束。