[發(fā)明專利]一種基于企業(yè)級大數(shù)據(jù)平臺支撐上層應(yīng)用的系統(tǒng)架構(gòu)

在審

• 申請?zhí)枺?/td>: 201610193908.8
• 申請日: 2016-03-31
• 公開（公告）號: CN105681474A
• 公開（公告）日: 2016-06-15
• 發(fā)明（設(shè)計）人: 崔延元
• 申請（專利權(quán)）人: 浪潮通信信息系統(tǒng)有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;G06F17/30
• 代理公司: 濟南信達(dá)專利事務(wù)所有限公司 37100
• 代理人: 羅文曌

技術(shù)領(lǐng)域

本發(fā)明涉及大數(shù)據(jù)處理領(lǐng)域，具體地說是一種基于企業(yè)級大數(shù)據(jù)平臺支撐上層應(yīng)用的系統(tǒng)架構(gòu)。

背景技術(shù)

隨著計算機網(wǎng)絡(luò)的飛速發(fā)展和信息化的推進，數(shù)據(jù)的采集、存儲和傳播日益增加。企業(yè)內(nèi)部以及企業(yè)外部之間信息的交流日益強烈，但企業(yè)內(nèi)部各個部門，企業(yè)與企業(yè)之間的信息平臺的數(shù)據(jù)源往往彼此獨立，存在異構(gòu)現(xiàn)象。當(dāng)前煙囪式軟件系統(tǒng)的建設(shè)在企業(yè)內(nèi)部以及企業(yè)外部之間均普遍存在信息割裂、數(shù)據(jù)重復(fù)等問題，造成數(shù)據(jù)管理分散、信息孤島嚴(yán)重等問題，數(shù)據(jù)無法在不同系統(tǒng)之間交叉共享，從而導(dǎo)致系統(tǒng)功能重復(fù)建設(shè)，數(shù)據(jù)管理困難，資源浪費。如附圖1所示的業(yè)務(wù)分析，數(shù)據(jù)中心如何能夠主動或被動的進行信息獲取，如何能夠整合各種數(shù)據(jù)源，對各類數(shù)據(jù)進行關(guān)聯(lián)挖掘分析，實現(xiàn)大數(shù)據(jù)關(guān)聯(lián)應(yīng)用，從而為各種業(yè)務(wù)需求應(yīng)用場景提供數(shù)據(jù)支撐，給企業(yè)帶來多樣化的業(yè)務(wù)分析手段。

發(fā)明內(nèi)容

本發(fā)明的技術(shù)任務(wù)是針對以上不足之處，提供一種基于企業(yè)級大數(shù)據(jù)平臺支撐上層應(yīng)用的系統(tǒng)架構(gòu)，來解決軟件系統(tǒng)的建設(shè)在企業(yè)內(nèi)部以及企業(yè)外部之間的信息割裂以及數(shù)據(jù)重復(fù)的問題。

本發(fā)明解決其技術(shù)問題所采用的技術(shù)方案是：一種基于企業(yè)級大數(shù)據(jù)平臺支撐上層應(yīng)用的系統(tǒng)架構(gòu)，該系統(tǒng)架構(gòu)包括數(shù)據(jù)中心平臺、數(shù)據(jù)分析平臺和系統(tǒng)管理平臺，數(shù)據(jù)中心平臺包括分布式數(shù)據(jù)處理子系統(tǒng)、大數(shù)據(jù)平臺、數(shù)據(jù)倉庫、數(shù)據(jù)共享子系統(tǒng)、數(shù)據(jù)質(zhì)量子系統(tǒng)、元數(shù)據(jù)子系統(tǒng)和任務(wù)調(diào)度子系統(tǒng)；數(shù)據(jù)分析平臺包括數(shù)據(jù)分析專題門戶和數(shù)據(jù)可視化分析子系統(tǒng)；系統(tǒng)管理平臺包括認(rèn)證鑒權(quán)、配置管理和日志管理。其中，該系統(tǒng)架構(gòu)基于X86架構(gòu)。

作為優(yōu)選，所述數(shù)據(jù)中心平臺以基礎(chǔ)設(shè)施層和應(yīng)用層實現(xiàn)，數(shù)據(jù)分析平臺以數(shù)據(jù)層和服務(wù)層實現(xiàn)，系統(tǒng)管理平臺以數(shù)據(jù)層實現(xiàn)。其中，該系統(tǒng)架構(gòu)基于云計算以及互聯(lián)網(wǎng)模式的系統(tǒng)架構(gòu)，實現(xiàn)基礎(chǔ)設(shè)施層（IaaS）、數(shù)據(jù)層（DaaS）、服務(wù)層（PaaS）以及應(yīng)用層（SaaS）的解耦分離，同時各層均具有封裝的服務(wù)能力，營造開放共享的系統(tǒng)生態(tài)環(huán)境。服務(wù)層提供各種開發(fā)和分發(fā)應(yīng)用的解決方案，比如虛擬服務(wù)器和操作系統(tǒng)。

作為優(yōu)選，所述基礎(chǔ)設(shè)施層采用x86分布式計算和存儲資源，提供場外服務(wù)器、存儲和網(wǎng)絡(luò)硬件，用于實現(xiàn)易管理、易擴展、高可靠以及高吞吐的特性；數(shù)據(jù)層用于提供安全可靠的數(shù)據(jù)開放平臺，通過數(shù)據(jù)統(tǒng)一建模、統(tǒng)一存儲和統(tǒng)一共享實現(xiàn)快速的數(shù)據(jù)聚合能力；服務(wù)層用于提供與業(yè)務(wù)無關(guān)的基礎(chǔ)服務(wù)；應(yīng)用層用于快速響應(yīng)業(yè)務(wù)需求和應(yīng)用開發(fā)，成為多種應(yīng)用的集中管理和開放平臺。

作為優(yōu)選，所述數(shù)據(jù)中心平臺、數(shù)據(jù)分析平臺和系統(tǒng)管理平臺均采用標(biāo)準(zhǔn)接口，便于升級替換。

更優(yōu)地，所述數(shù)據(jù)中心平臺采用Hadoop、MPP以及RDB技術(shù)，實現(xiàn)數(shù)據(jù)關(guān)聯(lián)分析和挖掘，進而實現(xiàn)企業(yè)內(nèi)部以及企業(yè)之間的數(shù)據(jù)共享，避免數(shù)據(jù)孤島的現(xiàn)象。

更優(yōu)地，所述系統(tǒng)架構(gòu)的工作過程包括如下步驟：

（1）、數(shù)據(jù)中心平臺完成原始數(shù)據(jù)的接入及匯總處理；

（2）、數(shù)據(jù)分析平臺根據(jù)業(yè)務(wù)需要從數(shù)據(jù)中心平臺查詢并呈現(xiàn)匯總后的數(shù)據(jù)；

（3）、系統(tǒng)管理平臺對整個企業(yè)級大數(shù)據(jù)平臺進行日志以及配置的日常管理。

本發(fā)明的一種基于企業(yè)級大數(shù)據(jù)平臺支撐上層應(yīng)用的系統(tǒng)架構(gòu)和現(xiàn)有技術(shù)相比，具有以下有益效果：

1、本發(fā)明采用云計算、大數(shù)據(jù)技術(shù)解決了當(dāng)前煙囪式的軟件系統(tǒng)建設(shè)存在的信息割裂、數(shù)據(jù)重復(fù)等突出問題，通過整合各種數(shù)據(jù)源，對各類數(shù)據(jù)進行關(guān)聯(lián)挖掘分析，從而為各種業(yè)務(wù)需求應(yīng)用場景提供數(shù)據(jù)支撐，給企業(yè)帶來了多樣化的業(yè)務(wù)分析手段；

2、本發(fā)明實現(xiàn)了數(shù)據(jù)開放共享，打破廠商壟斷數(shù)據(jù)的局面，形成開放的生態(tài)格局，數(shù)據(jù)主本統(tǒng)一，避免數(shù)據(jù)的重復(fù)存放，減少資源浪費，形成應(yīng)用和數(shù)據(jù)分離的體系架構(gòu)，底層共享的數(shù)據(jù)統(tǒng)一支撐上層各種應(yīng)用，從而給企業(yè)轉(zhuǎn)型和創(chuàng)新帶來可靠的數(shù)據(jù)分析手段；

3、本發(fā)明基于企業(yè)級大數(shù)據(jù)平臺采用大數(shù)據(jù)處理技術(shù)的系統(tǒng)架構(gòu)通過整合各種數(shù)據(jù)資源，同時采用Hadoop、MPP以及RDB技術(shù)，進行各種數(shù)據(jù)的關(guān)聯(lián)分析和挖掘，根據(jù)業(yè)務(wù)需求支撐各種類型的專題分析，提高了企業(yè)信息獲取、問題分析和定位等能力，給業(yè)務(wù)經(jīng)營帶來極大的幫助。

故本發(fā)明具有設(shè)計合理、結(jié)構(gòu)簡單、使用方便、一物多用等特點，因而，具有很好的推廣使用價值。

附圖說明

下面結(jié)合附圖對本發(fā)明進一步說明。

附圖1為背景技術(shù)中的業(yè)務(wù)分析圖；

附圖2為一種基于企業(yè)級大數(shù)據(jù)平臺支撐上層應(yīng)用的系統(tǒng)架構(gòu)按照分層劃分的結(jié)構(gòu)框圖；