[發(fā)明專利]一種數(shù)據(jù)分析管理系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110631239.9
• 申請(qǐng)日: 2021-06-07
• 公開（公告）號(hào): CN113377860A
• 公開（公告）日: 2021-09-10
• 發(fā)明（設(shè)計(jì)）人: 趙宏鑫;劉妙君;韋岡松;藍(lán)嫻;李慶;吳湘蓮;鄭宵
• 申請(qǐng)（專利權(quán)）人: 廣發(fā)銀行股份有限公司
• 主分類號(hào): G06F16/26
• 分類號(hào): G06F16/26;G06F16/21;G06F16/242;G06F16/2455;G06F16/27;G06F16/28
• 代理公司: 廣州三環(huán)專利商標(biāo)代理有限公司 44202
• 代理人: 陳旭紅;鐘文瀚

本發(fā)明公開了一種數(shù)據(jù)分析管理系統(tǒng)，包括：數(shù)據(jù)模型服務(wù)模塊，用于提供數(shù)據(jù)模型及查詢服務(wù)；BI靈活分析模塊，用于生成可視化分析圖表，并提供圖表分享功能；質(zhì)量檢核模塊，用于基于所述數(shù)據(jù)模型服務(wù)模塊，與所述BI靈活分析模塊的數(shù)據(jù)模型形成統(tǒng)一的業(yè)務(wù)對(duì)象，對(duì)業(yè)務(wù)對(duì)象的分析結(jié)果進(jìn)行監(jiān)控。本發(fā)明提供的數(shù)據(jù)分析管理系統(tǒng)，通過在數(shù)據(jù)模型設(shè)計(jì)了邏輯數(shù)據(jù)表?物理數(shù)據(jù)表的映射模型，采用了服務(wù)抽象成接口的方案，能夠從外部獲取一致的數(shù)據(jù)模型；通過在靈活分析模塊采用Vue前端技術(shù)框架開發(fā)靈活分析功能，使得靈活分析模塊多維查詢性能得到了有效提升；通過財(cái)務(wù)業(yè)務(wù)對(duì)象與數(shù)據(jù)邏輯模型保持對(duì)應(yīng)，業(yè)務(wù)側(cè)規(guī)則使用DSL進(jìn)行設(shè)計(jì)，更便于業(yè)務(wù)使用。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)分析及管理技術(shù)領(lǐng)域，具體涉及一種數(shù)據(jù)分析管理系統(tǒng)。

背景技術(shù)

通常來說，數(shù)據(jù)分析類應(yīng)用基于企業(yè)級(jí)數(shù)據(jù)倉庫，或直接搭建業(yè)務(wù)主題數(shù)據(jù)集市，通過數(shù)據(jù)ETL(Extract、Transform、Load)過程，構(gòu)建星型模型、雪花模型，使用各類報(bào)表工具作為前端，將數(shù)據(jù)展示成各類報(bào)表，供業(yè)務(wù)人員查詢，或提供數(shù)據(jù)下發(fā)接口，供下游應(yīng)用使用。為了提升數(shù)據(jù)應(yīng)用靈活性，數(shù)據(jù)分析系統(tǒng)通常在業(yè)務(wù)應(yīng)用側(cè)引入BI(BusinessIntelligence，商業(yè)智能)分析工具，實(shí)現(xiàn)業(yè)務(wù)人員自定義的數(shù)據(jù)分析表、可視化分析圖表等，提升數(shù)據(jù)分析能力。

然而，現(xiàn)有的BI類分析工具往往存在自身的缺點(diǎn)：

第一，現(xiàn)有的BI類分析工具主要關(guān)注數(shù)據(jù)展現(xiàn)層功能，缺少數(shù)據(jù)整合能力和數(shù)據(jù)應(yīng)用能力；數(shù)據(jù)集市等后端應(yīng)用，關(guān)注數(shù)據(jù)整合，又缺乏各種數(shù)據(jù)應(yīng)用功能上的靈活支持。

第二，采用“抽取數(shù)據(jù)”模式，在即席查詢時(shí)，當(dāng)遇到多數(shù)據(jù)源關(guān)聯(lián)查詢時(shí)，又因?yàn)樾枰〈罅繑?shù)據(jù)同步到本地內(nèi)存，引起查詢效率低、資源占用高等問題。

第三，由于數(shù)據(jù)分析與下游數(shù)據(jù)使用場(chǎng)景未構(gòu)建統(tǒng)一模型管理，難以管理；當(dāng)所需的分析維度頻繁變更時(shí)，就會(huì)涉及到文件接口的頻繁變更投產(chǎn)，無法靈活應(yīng)對(duì)業(yè)務(wù)需求。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種數(shù)據(jù)分析管理系統(tǒng)，以解決現(xiàn)有BI類分析工具存在的功能不全面、查詢效率低、難以統(tǒng)一管理數(shù)據(jù)的問題。

為了克服上述現(xiàn)有技術(shù)中的缺陷，本發(fā)明提供了一種數(shù)據(jù)分析管理系統(tǒng)，包括：

數(shù)據(jù)模型服務(wù)模塊，用于提供數(shù)據(jù)模型及查詢服務(wù)

BI靈活分析模塊，用于生成可視化分析圖表，并提供圖表分享功能；

質(zhì)量檢核模塊，用于基于所述數(shù)據(jù)模型服務(wù)模塊，與所述BI靈活分析模塊的數(shù)據(jù)模型形成統(tǒng)一的業(yè)務(wù)對(duì)象，對(duì)業(yè)務(wù)對(duì)象的分析結(jié)果進(jìn)行監(jiān)控。

進(jìn)一步地，所述數(shù)據(jù)模型服務(wù)模塊，包括數(shù)據(jù)模型單元及數(shù)據(jù)查詢單元；

所述數(shù)據(jù)模型單元，用于負(fù)責(zé)數(shù)據(jù)邏輯模型的定義和查詢，并記錄邏輯表，同時(shí)保留底層物理表的映射關(guān)系；

所述數(shù)據(jù)查詢單元，用于對(duì)外提供數(shù)據(jù)查詢接口，根據(jù)外部的查詢請(qǐng)求解析查詢表達(dá)式，并將結(jié)果返回至調(diào)用方。

進(jìn)一步地，所述數(shù)據(jù)模型單元，還用于：

設(shè)計(jì)每個(gè)數(shù)據(jù)查詢模型對(duì)應(yīng)的邏輯事實(shí)表、邏輯維度表，形成星型模型，向外部提供模型元數(shù)據(jù)信息查詢服務(wù)。

進(jìn)一步地，所述數(shù)據(jù)查詢單元內(nèi)設(shè)SQL緩存，用于當(dāng)查詢請(qǐng)求匹配一致時(shí)，從緩存直接獲取查詢表達(dá)式的解析結(jié)果。

進(jìn)一步地，所述數(shù)據(jù)查詢單元還用于，將所述解析結(jié)果進(jìn)行拆分和轉(zhuǎn)換，并與物理數(shù)據(jù)形成對(duì)應(yīng)的映射關(guān)系；

所述物理數(shù)據(jù)包括熱點(diǎn)數(shù)據(jù)、近線數(shù)據(jù)、歷史數(shù)據(jù)及多維分析數(shù)據(jù)，分別存儲(chǔ)在緩存數(shù)據(jù)庫、關(guān)系數(shù)據(jù)庫、分布式數(shù)據(jù)庫及多維分析數(shù)據(jù)庫中，與所述數(shù)據(jù)查詢單元接收的邏輯查詢請(qǐng)求不相關(guān)。