[發(fā)明專利]一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201410336492.1
• 申請(qǐng)日: 2014-07-15
• 公開（公告）號(hào): CN104933083A
• 公開（公告）日: 2015-09-23
• 發(fā)明（設(shè)計(jì)）人: 周子冠;李祥珍;歐清海
• 申請(qǐng)（專利權(quán)）人: 國(guó)家電網(wǎng)公司;南京南瑞集團(tuán)公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30
• 代理公司: 北京中譽(yù)威圣知識(shí)產(chǎn)權(quán)代理有限公司 11279
• 代理人: 郭振興;叢芳

技術(shù)領(lǐng)域

本發(fā)明涉及智能電網(wǎng)領(lǐng)域中傳感器數(shù)據(jù)處理的技術(shù)領(lǐng)域，具體地，涉及一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理方法及裝置。

背景技術(shù)

隨著我國(guó)電網(wǎng)的快速發(fā)展，在發(fā)電、輸電、變電、配電、用電、調(diào)度等各環(huán)節(jié)的設(shè)備及系統(tǒng)日趨復(fù)雜和龐大；各種基礎(chǔ)數(shù)據(jù)的感知、采集和匯聚促進(jìn)了大量傳感設(shè)備、測(cè)量工具、智能終端等的使用。從現(xiàn)今電力生產(chǎn)運(yùn)行來看，一方面需要開發(fā)各種類型的感知設(shè)備實(shí)現(xiàn)對(duì)現(xiàn)場(chǎng)信息的感知和采集，拓寬信息源的深度和廣度；另一方面，日益增多的傳感器數(shù)量及種類將導(dǎo)致多種傳感技術(shù)及規(guī)范的同時(shí)使用，由此引發(fā)了各種采集數(shù)據(jù)的數(shù)據(jù)表達(dá)(標(biāo)識(shí)、語義、數(shù)據(jù)表達(dá)格式等)無法做到統(tǒng)一。由此產(chǎn)生的海量異構(gòu)傳感器數(shù)據(jù)的處理問題，成為推廣應(yīng)用的瓶頸。

在實(shí)現(xiàn)本發(fā)明過程中，發(fā)明人發(fā)現(xiàn)現(xiàn)有技術(shù)中至少存在如下問題：

(1)傳感器數(shù)據(jù)量巨大且傳感器網(wǎng)絡(luò)匯聚造成的數(shù)據(jù)流沖擊，采用固定的內(nèi)存數(shù)據(jù)緩存受到計(jì)算機(jī)硬件資源的限制，采用磁盤緩存無法滿足性能要求。

(2)隨著傳感器應(yīng)用的深入不可避免的引入新類型傳感器，動(dòng)態(tài)處理新數(shù)據(jù)類型限制了行業(yè)應(yīng)用。

(3)由于外部環(huán)境和傳感器自身原因，需要多傳感器組合計(jì)算被測(cè)量，多傳感器聚合分析提高目標(biāo)量的指標(biāo)。由于資源限制目前此類業(yè)務(wù)多采用事后分析，難以實(shí)現(xiàn)即時(shí)的預(yù)警告警。

發(fā)明內(nèi)容

本發(fā)明是為了克服現(xiàn)有技術(shù)中智能電網(wǎng)海量傳感器數(shù)據(jù)處理易受資源限制、無法滿足性能要求的缺陷，根據(jù)本發(fā)明的一個(gè)方面，提出一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理方法。

本發(fā)明實(shí)施例提供的一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理方法，包括：接收傳感器報(bào)文，并根據(jù)傳感器報(bào)文提取傳感器ID，傳感器報(bào)文包括傳感器報(bào)文頭和傳感器數(shù)據(jù)；根據(jù)傳感器數(shù)據(jù)頭中的傳感器ID與傳感器結(jié)構(gòu)之間的映射關(guān)系確定與傳感器ID相應(yīng)的傳感器結(jié)構(gòu)，傳感器結(jié)構(gòu)包括傳感器生存時(shí)間和傳感器報(bào)文頭指針；更新傳感器生存時(shí)間，并根據(jù)傳感器報(bào)文頭指針定位傳感器報(bào)文頭，傳感器報(bào)文頭包括傳感器數(shù)據(jù)數(shù)組開始指針和傳感器數(shù)據(jù)數(shù)組結(jié)束指針；根據(jù)傳感器報(bào)文頭包括傳感器數(shù)據(jù)數(shù)組開始指針和傳感器數(shù)據(jù)數(shù)組結(jié)束指針，將傳感器數(shù)據(jù)存入傳感器數(shù)據(jù)鏈表中。

在上述技術(shù)方案中，當(dāng)傳感器ID與傳感器結(jié)構(gòu)之間的映射關(guān)系中不存在與傳感器ID相應(yīng)的傳感器結(jié)構(gòu)時(shí)，為傳感器ID分配新的傳感器結(jié)構(gòu)，并更新傳感器數(shù)據(jù)頭。

在上述技術(shù)方案中，還包括：根據(jù)傳感器總數(shù)和傳感器結(jié)構(gòu)指針列表遍歷傳感器結(jié)構(gòu)，監(jiān)測(cè)傳感器生存時(shí)間，傳感器總數(shù)和傳感器結(jié)構(gòu)指針列表存儲(chǔ)于傳感器數(shù)據(jù)頭中；當(dāng)傳感器生存時(shí)間小于第一預(yù)設(shè)閾值時(shí)，根據(jù)傳感器結(jié)構(gòu)中的傳感器報(bào)文頭指針確定并刪除相應(yīng)的傳感器報(bào)文頭和傳感器數(shù)據(jù)；釋放傳感器結(jié)構(gòu)的資源，并更新傳感器數(shù)據(jù)頭。

本發(fā)明是為了克服現(xiàn)有技術(shù)中智能電網(wǎng)海量傳感器數(shù)據(jù)處理易受資源限制、無法滿足性能要求的缺陷，根據(jù)本發(fā)明的一個(gè)方面，提出一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理方法。

本發(fā)明實(shí)施例提供的一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理方法，包括：定時(shí)遍歷傳感器數(shù)據(jù)鏈表，當(dāng)確定存在新緩存的傳感器數(shù)據(jù)時(shí)，根據(jù)傳感器數(shù)據(jù)中的傳感器廠家類型、傳感器類型和傳感器版本在傳感器數(shù)據(jù)處理庫中查找相對(duì)應(yīng)的傳感器數(shù)據(jù)處理方法；根據(jù)傳感器數(shù)據(jù)處理方法處理新緩存的傳感器數(shù)據(jù)，并更新傳感器數(shù)據(jù)處理方法的處理方法生存時(shí)間。

在上述技術(shù)方案中，還包括：定時(shí)遍歷傳感器數(shù)據(jù)處理庫中的傳感器數(shù)據(jù)處理方法，監(jiān)測(cè)處理方法生存時(shí)間；當(dāng)處理方法生存時(shí)間小于第二預(yù)設(shè)閾值時(shí)，刪除與處理方法生存時(shí)間相對(duì)應(yīng)的傳感器數(shù)據(jù)處理方法的資源。

在上述技術(shù)方案中，還包括：遍歷配置庫中的每個(gè)聚合處理配置實(shí)例，聚合處理配置實(shí)例包括傳感器ID列表、聚合處理方法ID；根據(jù)相關(guān)傳感器ID列表檢查相關(guān)傳感器的相關(guān)傳感器數(shù)據(jù)是否更新；在確定傳感器數(shù)據(jù)更新時(shí)，根據(jù)聚合處理方法ID在數(shù)據(jù)聚合處理庫中查找相應(yīng)的數(shù)據(jù)聚合處理方法；根據(jù)傳感器數(shù)據(jù)聚合處理方法處理相關(guān)傳感器數(shù)據(jù)，并更新傳感器數(shù)據(jù)聚合處理方法的聚合處理方法生存時(shí)間。

在上述技術(shù)方案中，還包括：定時(shí)遍歷傳感器數(shù)據(jù)聚合處理庫中的傳感器數(shù)據(jù)聚合處理方法，監(jiān)測(cè)聚合處理方法生存時(shí)間；當(dāng)聚合處理方法生存時(shí)間小于第三預(yù)設(shè)閾值時(shí)，刪除與聚合處理方法生存時(shí)間相對(duì)應(yīng)的傳感器數(shù)據(jù)聚合處理方法的資源。

本發(fā)明是為了克服現(xiàn)有技術(shù)中智能電網(wǎng)海量傳感器數(shù)據(jù)處理易受資源限制、無法滿足性能要求的缺陷，根據(jù)本發(fā)明的一個(gè)方面，提出一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理裝置。

本發(fā)明實(shí)施例提供的一種傳感器數(shù)據(jù)動(dòng)態(tài)伸縮的處理裝置，包括：數(shù)據(jù)緩存引擎、傳感器數(shù)據(jù)頭和傳感器數(shù)據(jù)鏈表；