[發(fā)明專利]一種對標數(shù)據(jù)的獲取方法及系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201510455501.3
• 申請日: 2015-07-29
• 公開（公告）號: CN105023108B
• 公開（公告）日: 2018-10-09
• 發(fā)明（設計）人: 池煜;張靜
• 申請（專利權）人: 中建材智慧工業(yè)科技有限公司
• 主分類號: G06F17/00
• 分類號: G06F17/00
• 代理公司: 北京名華博信知識產權代理有限公司 11453
• 代理人: 苗源;李冬梅

1.一種對標數(shù)據(jù)的獲取方法，包括：

數(shù)據(jù)采集模塊接收客戶端通過網(wǎng)絡傳輸來的效能數(shù)據(jù)，并轉發(fā)到數(shù)據(jù)構建模塊；

所述數(shù)據(jù)構建模塊對接收到的所述效能數(shù)據(jù)進行持久化操作；在效能數(shù)據(jù)積累到一定數(shù)量級后，所述數(shù)據(jù)構建模塊開始對持久化的所有數(shù)據(jù)進行分類；在收到所述客戶端通過數(shù)據(jù)采集模塊發(fā)來的針對某一類型的效能數(shù)據(jù)的對標請求后，根據(jù)該請求為該類效能數(shù)據(jù)構建相應的對標模型；

數(shù)據(jù)過濾模塊根據(jù)所述對標請求對已持久化的該類型的效能數(shù)據(jù)進行過濾操作后發(fā)送給數(shù)據(jù)計算分析模塊，所述過濾操作包括：統(tǒng)一編碼和去噪；

所述數(shù)據(jù)計算分析模塊對接收到的經(jīng)過過濾操作的效能數(shù)據(jù)進行數(shù)據(jù)訓練，從中剔除不適合對標模型的數(shù)據(jù)后，使用剩余的效能數(shù)據(jù)，通過所述對標模型進行計算，得到對標數(shù)據(jù)，其中，所述效能數(shù)據(jù)包括能耗、產量、發(fā)電量、運轉率、損耗，

其中，所述數(shù)據(jù)構建模塊對接收到的所述效能數(shù)據(jù)進行持久化操作，具體包括：如判斷出接收到的所述效能數(shù)據(jù)為非結構化數(shù)據(jù)，則通過mongo路由服務器將該效能數(shù)據(jù)持久化到shard服務器集群中的一個，

其中，所述通過mongo路由服務器將該效能數(shù)據(jù)持久化到shard服務器集群中的一個，具體包括：

所述mongo路由服務器中預先保存了兩個映射關系，第一映射關系是鍵值的區(qū)間與效能數(shù)據(jù)塊的映射關系，第二映射關系是效能數(shù)據(jù)塊與所在分片節(jié)點的映射關系；

所述mongo路由服務器在收到所述數(shù)據(jù)構建模塊發(fā)來的效能數(shù)據(jù)后，按照預定算法對所述效能數(shù)據(jù)進行計算，將計算得到的結果作為鍵值，根據(jù)所述第一映射關系查找對應的效能數(shù)據(jù)塊，再利用查找到的效能數(shù)據(jù)塊結合所述第二映射關系查找對應的shard服務器，然后將該效能數(shù)據(jù)持久化到該對應的shard服務器中。

2.如權利要求1所述的方法，其特征在于，還包括：

所述數(shù)據(jù)計算分析模塊將得到的所述對標數(shù)據(jù)結果轉變?yōu)樾枰獙说恼宫F(xiàn)形式，通過所述數(shù)據(jù)采集模塊發(fā)送給所述客戶端以進行展示。

3.如權利要求1所述的方法，其特征在于：

所述數(shù)據(jù)采集模塊由負載均衡服務器和一個以上的Web服務器組成；所述負載均衡器在收到所述客戶端發(fā)來的效能數(shù)據(jù)后，根據(jù)預設的分發(fā)策略將該效能數(shù)據(jù)分發(fā)到其中一個Web服務器。

4.如權利要求1所述的方法，其特征在于：

所述數(shù)據(jù)構建模塊對接收到的所述效能數(shù)據(jù)進行持久化操作，具體還包括：所述數(shù)據(jù)構建模塊如判斷出接收到的所述效能數(shù)據(jù)為結構化數(shù)據(jù)，則將所述效能數(shù)據(jù)持久化到MySQL數(shù)據(jù)庫集群，同時按照主從分離策略將效能數(shù)據(jù)分離，主庫提供插入、刪除、更新操作，從庫提供查詢操作。

5.如權利要求4所述的方法，其特征在于，還包括：

在將所述效能數(shù)據(jù)持久化到對應的shard服務器中時，所述mongo路由服務器還判斷當前待寫入的效能數(shù)據(jù)塊是否超出限定大小；如果超出，則將該效能數(shù)據(jù)塊分列成兩個效能數(shù)據(jù)塊后再進行寫入。

6.如權利要求1所述的方法，其特征在于：

所述對標模型的計算公式為：各產品的產量與該產品的實際效能數(shù)據(jù)的乘積之和除以各產品的產量與該產品的最優(yōu)效能數(shù)據(jù)的乘積之和。