[發明專利]一種海量數據智能處理系統

在審

• 申請號: 201310261572.0
• 申請日: 2013-06-27
• 公開（公告）號: CN103365972A
• 公開（公告）日: 2013-10-23
• 發明（設計）人: 姜嘯宇;朱燁東
• 申請（專利權）人: 北京中科金財科技股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京聯瑞聯豐知識產權代理事務所(普通合伙) 11411
• 代理人: 鄭自群

技術領域

本發明涉及數據處理領域，特別是指一種海量數據智能處理系統。

背景技術

隨著信息技術的不斷發展，信息量與日俱增，信息形式變得多種多樣，單一數據庫的數據存儲能力逐漸變得力不從心，眾多領域中對數據存儲的要求也隨著信息信息量的要求不斷增加；

現有技術中，對海量數據的處理一般還停留在原始的單一數據庫處理，即便已經出現了少量的多數據庫集成處理的方式，但由于技術的限制或者操作方式的局限性依然不能夠有效的對數據進行處理，為日常的數據存儲、調用等增加了麻煩；

綜上，一種結構簡單，易操作上手的海量數據處理系統迫切需要。

發明內容

本發明提出一種海量數據智能處理系統，解決了現有技術中無法對海量數據進行有效處理的問題。

本發明的技術方案是這樣實現的：

一種海量數據智能處理系統，包括：

存儲裝置，用于進行海量數據存儲；

管理集群裝置，用于控制海量數據的歸檔、備份、恢復、遷移和回遷，與存儲裝置連接；

數據存儲應用裝置，用于存儲系統海量數據應用服務，與存儲裝置連接；

數據集群裝置，用于管理存儲的海量數據，并對存儲的海量數據進行轉儲或清除操作，與存儲裝置連接；

公共管理應用集群裝置，用于與外部用戶進行信息交換、控制海量數據中轉，并為海量數據的傳輸提供接口，與存儲裝置連接。

作為進一步的技術方案，還包括：

中轉裝置，用于進行存儲裝置與管理集群裝置、數據存儲應用裝置、數據集群裝置和公共管理應用集群裝置之間的數據傳輸轉換，設置在存儲裝置與管理集群裝置、數據存儲應用裝置、數據集群裝置和公共管理應用集群裝置之間。

作為進一步的技術方案，存儲裝置包括：

在線存儲單元，用于海量數據的在線存儲；

近線存儲單元，用于數據近線存儲；

離線存儲單元，用于在海量數據備份或歸檔后進行存儲。

優選的，在線存儲單元包括4臺磁盤陣列；近線存儲單元包括3臺磁盤陣列；離線存儲單元包括2臺磁帶庫。

作為進一步的技術方案，存儲裝置還包括：

虛擬存儲單元，用于緩解離線存儲單元備份時的壓力，減小備份時間。

優選的，虛擬存儲單元包括1臺磁盤陣列。

作為進一步的技術方案，管理集群裝置包括第一操作單元和第一應用單元，其中，第一操作單元控制第一應用單元進行海量數據的規定、備份、恢復、遷移和回遷操作。

作為進一步的技術方案，數據存儲應用裝置包括：第二操作單元和第二應用單元，其中第二操作單元控制第二應用單元進行海量數據的入庫或提取操作。

作為進一步的技術方案，數據集群裝置包括：第三操作單元和第三應用單元，其中第三操作單元控制第三應用單元對存儲裝置存儲的海量數據進行結構化管理或監控操作。

作為進一步的技術方案，公共管理應用集群裝置包括：第四操作單元和第四應用單元，其中，第四操作單元控制第四應用單元與外部用戶進行數據信息交換或對存儲裝置中存儲的海量數據進行中轉操作。

本發明技術方案通過存儲裝置對海量數據進行存儲，并在管理集群裝置、數據存儲應用裝置、數據集群裝置和公共管理應用集群裝置的控制下，可實現對存儲裝置中數據的固定，備份、入庫、提取、結構化管理等操作，并且能夠在保證數據有效處理的前提下，有效的實現與外部用戶的數據信息交換。

附圖說明

為了更清楚地說明本發明實施例或現有技術中的技術方案，下面將對實施例或現有技術描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發明的一些實施例，對于本領域普通技術人員來講，在不付出創造性勞動性的前提下，還可以根據這些附圖獲得其他的附圖。

圖1為本發明一種海量數據智能處理系統一個實施例的結構框圖；

圖2為本發明一種海量數據智能處理系統另一個實施例的結構框圖；

圖3為本發明一種海量數據智能處理系統再一個實施例的結構框圖。

圖中：

1、存儲裝置；101、在線存儲單元；102、近線存儲單元；103、離線存儲單元；104、虛擬存儲單元；2、管理集群裝置；3、數據存儲應用裝置；4、數據集群裝置；5、公共管理應用集群裝置；6、中轉裝置。

具體實施方式