[發(fā)明專利]基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法

在審

• 申請?zhí)枺?/td>: 202011562871.4
• 申請日: 2020-12-25
• 公開（公告）號: CN112925845A
• 公開（公告）日: 2021-06-08
• 發(fā)明（設計）人: 歐陽宇宏;吳晗;康文倩;史浩秋;車向北;吳濤;鄧彬;鄭曉露;王玉軍;胡亞榮;王漢潮;李雨森;趙虎;崔偉業(yè);張瑞
• 申請（專利權）人: 深圳供電局有限公司;國電南瑞南京控制系統(tǒng)有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/2458
• 代理公司: 南京縱橫知識產(chǎn)權代理有限公司 32224
• 代理人: 董建林

1.基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述云數(shù)據(jù)中心系統(tǒng)包括：歷史數(shù)據(jù)抽取服務模塊、HBase主動采樣服務模塊、分布式列式存儲數(shù)據(jù)庫HBase、HBase采樣查詢服務模塊、上層應用模塊，所述歷史數(shù)據(jù)抽取服務模塊、所述HBase主動采樣服務模塊、所述HBase采樣查詢服務模塊分別與所述分布式列式存儲數(shù)據(jù)庫HBase通訊連接，HBase采樣查詢服務模塊與所述上層應用模塊通訊連接，所述管理方法包括如下步驟：

歷史數(shù)據(jù)抽取服務模塊從模型庫中獲取訂閱的量測信息；根據(jù)所述量測信息來源通過服務總線向所述量測信息來源所在區(qū)域調(diào)度的歷史數(shù)據(jù)服務請求指定歷史數(shù)據(jù)，所述歷史數(shù)據(jù)抽取服務模塊獲得數(shù)據(jù)后直接提交給分布式列式存儲數(shù)據(jù)庫HBase；HBase主動采樣服務模塊負責模型中心私有模型的數(shù)據(jù)采集，HBase主動采樣服務模塊提交數(shù)據(jù)到分布式列式存儲數(shù)據(jù)庫HBase；HBase采樣查詢服務模塊為所述上層應用模塊提供歷史數(shù)據(jù)查詢服務。

2.根據(jù)權利要求1所述的基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述量測信息包括遙測歷史數(shù)據(jù)訂閱表，所述遙測歷史數(shù)據(jù)訂閱表描述數(shù)據(jù)中心采樣數(shù)據(jù)的規(guī)模，以及為各個量測信息描述直采區(qū)域。

3.根據(jù)權利要求1所述的基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述云數(shù)據(jù)中心系統(tǒng)維護遙測歷史數(shù)據(jù)訂閱表，標識測點的來源，具體包括：從哪個地調(diào)抽取該測點的歷史數(shù)據(jù)，而不是分配存儲的位置；如果該測點來源為數(shù)據(jù)中心，則表示數(shù)據(jù)由本地的歷史采樣服務進行采集；如果該測點來源為非數(shù)據(jù)中心，則從所定義的區(qū)域抽取歷史數(shù)據(jù)。

4.根據(jù)權利要求1所述的基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述HBase主動采樣服務模塊包括主動采樣定義模塊、被動采樣定義模塊；所述主動采樣定義模塊用于確定數(shù)據(jù)源；所述被動采樣定義模塊用于確定采樣周期，所述HBase主動采樣服務模塊的數(shù)據(jù)源默認為“云數(shù)據(jù)中心系統(tǒng)”；所述HBase主動采樣服務模塊默認按照數(shù)據(jù)源、廠站、表的策略顯示已定義量測點。

5.根據(jù)權利要求1所述的基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述管理方法包括：直接采樣區(qū)域為云數(shù)據(jù)中心系統(tǒng)，則由HBase主動采樣服務模塊執(zhí)行；如果直接采樣區(qū)域為非云數(shù)據(jù)中心系統(tǒng)，則由歷史數(shù)據(jù)抽取服務模塊執(zhí)行。

6.根據(jù)權利要求1所述的基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述管理方法包括：非云數(shù)據(jù)中心系統(tǒng)采樣的測點按照數(shù)據(jù)類型的不同分為計算點和非計算點兩種處理方式，對應的抽取周期分別為延時5分鐘和延時10分鐘；對于計算點由于歷史數(shù)據(jù)重算服務延時5分鐘重新計算結(jié)果值后回寫采樣庫，使用延時10分鐘抽取周期策略，而非計算值表使用延時5分鐘抽取周期策略。

7.根據(jù)權利要求1所述的基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述管理方法包括：歷史數(shù)據(jù)抽取服務模塊根據(jù)遙測歷史數(shù)據(jù)訂閱表從各個地調(diào)按1小時間隔查詢“采樣修改告警表”，對于該掃描周期內(nèi)存在采樣修改的，重新從數(shù)據(jù)源按時間點抽取采樣數(shù)據(jù)，然后保存到分布式列式存儲數(shù)據(jù)庫HBase中。

8.根據(jù)權利要求1所述的基于分布式列式存儲的云數(shù)據(jù)中心系統(tǒng)歷史數(shù)據(jù)管理方法，其特征在于，所述管理方法包括：所述HBase主動采樣服務模塊通過遙測歷史數(shù)據(jù)訂閱表過濾出需要本地采集的測點集合，按定義的時間周期從分布式列式存儲數(shù)據(jù)庫HBase中獲取數(shù)據(jù)；數(shù)據(jù)采集成功后，存入采樣隊列中，采樣隊列中采樣點結(jié)構(gòu)為“時間--值--質(zhì)量碼”。