[發明專利]一種基于云計算的信息處理方法及系統在審
| 申請號: | 202110053931.8 | 申請日: | 2021-01-15 |
| 公開(公告)號: | CN112632155A | 公開(公告)日: | 2021-04-09 |
| 發明(設計)人: | 不公告發明人 | 申請(專利權)人: | 萬文蘭 |
| 主分類號: | G06F16/2458 | 分類號: | G06F16/2458;G06F16/26;G06F16/28;H04L29/06;H04L29/08 |
| 代理公司: | 暫無信息 | 代理人: | 暫無信息 |
| 地址: | 511400 廣東省廣州*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 基于 計算 信息處理 方法 系統 | ||
1.一種基于云計算的信息處理方法,其特征在于,所述基于云計算的信息處理方法,包括以下步驟:
步驟一,信息采集模塊利用數據采集設備獲取待處理的信息數據,并且信息預處理模塊利用數據預處理程序控制數據網關對獲取的待處理的異構數據進行轉換和集成,并將經過分流后的數據輸送至中央控制模塊;
步驟二,中央控制模塊利用中央處理器協調控制所述基于云計算的信息處理系統各個模塊的正常運行;用戶在客戶端通過服務請求提交模塊利用請求提交程序向所述基于云計算的信息處理系統提交服務請求;
步驟三,通過信息處理模塊利用信息處理程序基于云計算技術根據服務請求對分流后的數據進行處理,獲取服務節點的負載情況;優化調節模塊利用優化調節程序利用解析調度器對獲取的需要動態調節負載的需求進行優化調節;
步驟四,通過大數據挖掘模塊利用數據挖掘程序對處理后的數據進行挖掘,獲取挖掘后的數據;通過Hive數據查詢模塊利用SQL接口實現數據的查詢功能,并為Hbase數據倉庫的各種存儲表建立索引關系;
步驟五,通過數據存儲模塊利用Hbase數據倉庫存儲獲取的待處理的信息數據、信息預處理結果、服務請求、服務節點負載情況、優化調節結果、挖掘后的數據,并進行數據分類,建立存儲表索引關系;
步驟六,通過更新顯示模塊利用顯示設備對獲取的待處理的信息數據、信息預處理結果、服務請求、服務節點負載情況、優化調節結果、挖掘后的數據以及存儲表索引關系的實時數據進行更新顯示;
步驟一中,所述通過信息預處理模塊利用數據預處理程序控制數據網關對獲取的待處理的異構數據進行轉換和集成,包括:
通過信息預處理模塊統一異構數據標準格式的表現形式以及編寫異構數據采集中間件,獲取待處理的異構數據;
利用數據預處理程序將獲取的異構數據按照不同模式、不同主題屬性子進行聚類,通過聚類的形式形成可供分類的主題屬性子以及模式;
通過數據網關根據分類約束對聚類形成的可供分類的主題屬性子以及模式進行模式重組,選擇一種帶約束的模式對聚類形成的主題數據進行分類;
所述通過信息預處理模塊統一異構數據標準格式的表現形式,包括:
建立主題樹模型;
通過主題樹模型將結構化、半結構化以及非結構化的異構數據映射至最終的統一標準格式XML scheme;
消除和屏蔽異構數據結構模式上的差異,統一異構數據集成的格式;
步驟三中,所述通過信息處理模塊利用信息處理程序基于云計算技術根據服務請求對分流后的數據進行處理,包括:
通過信息處理模塊利用解析調度器解析所述服務請求,獲得服務請求類型和所需要的節點資源數量,并將解析結果發送至負載均衡器;
通過負載均衡器接收解析調度器發送的解析結果,基于所需要的服務器資源數量以及當前各個節點的負載情況,對節點負載進行預測;
信息處理程序基于云計算技術對負載均衡器進行檢測,分析分流后數據的安全屬性,并將檢測和分析結果提交至中央處理器。
2.如權利要求1所述的基于云計算的信息處理方法,其特征在于,所述基于所需要的服務器資源數量以及當前各個節點的負載情況,對節點負載進行預測,包括:
負載均衡器從基于云計算的信息處理系統的各個節點的負載的數據集中提取采樣序列,并進行預處理;
創建N維時間序列作為學習樣本,用信息處理系統的各個節點的負載的 訓練樣本并基于設定的參數進行進行學習;
建立負載預測模型,通過負載預測模型對節點負載進行預測。
3.如權利要求1所述的基于云計算的信息處理方法,其特征在于,所述信息處理程序基于云計算技術對負載均衡器進行檢測,分析分流后數據的安全屬性,包括:
負載均衡器檢測和分析分流后數據的安全屬性;檢測到異常事件后,查詢黑名單和白名單并根據代碼特征庫和行為模式庫分析;
如果識別為風險,則按照預定規則處理并發出警告;否則將分流后數據散列計算加密后向各節點查詢,若查詢成功則按照規則處理。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于萬文蘭,未經萬文蘭許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110053931.8/1.html,轉載請聲明來源鉆瓜專利網。





