[發(fā)明專利]一種自動生成業(yè)務(wù)拓?fù)鋱D譜的數(shù)據(jù)關(guān)聯(lián)可視化方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202011238100.X
• 申請日: 2020-11-09
• 公開（公告）號: CN112364106A
• 公開（公告）日: 2021-02-12
• 發(fā)明（設(shè)計(jì)）人: 林光樟;李勇琪
• 申請（專利權(quán)）人: 深圳航天智慧城市系統(tǒng)技術(shù)研究院有限公司
• 主分類號: G06F16/28
• 分類號: G06F16/28;G06F16/26;G06F16/23;G06F16/215
• 代理公司: 深圳市添源知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44451
• 代理人: 黎健任

本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，特別涉及一種自動生成業(yè)務(wù)拓?fù)鋱D譜的數(shù)據(jù)關(guān)聯(lián)可視化方法及系統(tǒng)。其方法包括步驟S1.系統(tǒng)接入數(shù)據(jù)，通過數(shù)據(jù)處理模塊把所有接入的數(shù)據(jù)經(jīng)過清洗后入庫，對數(shù)據(jù)做好標(biāo)注；S2.對處理后的數(shù)據(jù)通過業(yè)務(wù)規(guī)則編排模塊進(jìn)行業(yè)務(wù)規(guī)則的編排；S3.對編排后的數(shù)據(jù)輸入到業(yè)務(wù)關(guān)系生成模塊中，調(diào)用業(yè)務(wù)關(guān)系生成服務(wù)，生成數(shù)據(jù)與業(yè)務(wù)之間的關(guān)聯(lián)關(guān)系；S4.將關(guān)聯(lián)關(guān)系通過可視化模塊以拓?fù)浞绞秸宫F(xiàn)。本發(fā)明通過不斷調(diào)整參數(shù)，去調(diào)整數(shù)據(jù)與業(yè)務(wù)關(guān)系，提高了數(shù)據(jù)的可靠性、減少了人工分析數(shù)據(jù)的成本、還能隨著數(shù)據(jù)的更新，快速響應(yīng)最新的業(yè)務(wù)情況自動更新輸出。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，特別涉及一種自動生成業(yè)務(wù)拓?fù)鋱D譜的數(shù)據(jù)關(guān)聯(lián)可視化方法及系統(tǒng)。

背景技術(shù)

隨著信息化的推進(jìn)，數(shù)據(jù)由少量、單一、更新慢和低價值的狀態(tài)到如今的大量、多樣、高速、高價值的轉(zhuǎn)變。隨著信息技術(shù)的高速發(fā)展，數(shù)據(jù)開始爆發(fā)性增長，隨著時間的推移，存儲單位從過去的GB到TB，乃至現(xiàn)在的PB、EB級別。這么大量又多樣的數(shù)據(jù)，迫切需要智能的算法、強(qiáng)大的數(shù)據(jù)處理平臺、新的數(shù)據(jù)處理技術(shù)和新的可視化方案，來表示如此大規(guī)模的數(shù)據(jù)之間的關(guān)聯(lián)關(guān)系。此外，數(shù)據(jù)驅(qū)動著業(yè)務(wù)，只有對業(yè)務(wù)足夠了解，才能讓數(shù)據(jù)發(fā)揮最大作用。數(shù)據(jù)處理人員對數(shù)據(jù)了解但對業(yè)務(wù)的探索深度、廣度和細(xì)節(jié)有所不足，而業(yè)務(wù)人員對數(shù)據(jù)了解又不足，無法形成最佳質(zhì)量的數(shù)據(jù)成果輸出。通過數(shù)據(jù)關(guān)聯(lián)關(guān)系，數(shù)據(jù)人員只管數(shù)據(jù)的深度挖掘，業(yè)務(wù)人員依托可視化進(jìn)行業(yè)務(wù)挖掘，最終輸出高質(zhì)量且豐富的成果。這種方式的發(fā)展，實(shí)現(xiàn)了數(shù)據(jù)和業(yè)務(wù)的合作關(guān)系，隨著數(shù)據(jù)逐漸標(biāo)準(zhǔn)化、系統(tǒng)化、數(shù)據(jù)和業(yè)務(wù)的關(guān)系還可逐步自動化生成。

目前的關(guān)聯(lián)數(shù)據(jù)可視化展示方案，因?yàn)閿?shù)據(jù)和業(yè)務(wù)的關(guān)系，沒有固定形態(tài)且更新變化快，而且數(shù)據(jù)標(biāo)準(zhǔn)程度不一致，結(jié)構(gòu)非結(jié)構(gòu)數(shù)據(jù)多樣，大量數(shù)據(jù)接入沒有經(jīng)過預(yù)處理和清洗，數(shù)據(jù)冗余大且不帶可識別標(biāo)注。基本上都是基于人工梳理，由業(yè)務(wù)人員向數(shù)據(jù)團(tuán)隊(duì)提需求，數(shù)據(jù)團(tuán)隊(duì)花費(fèi)大量時間響應(yīng)需求，沒有更多精力去挖掘數(shù)據(jù)。最終，把人工梳理的業(yè)務(wù)關(guān)系以拓?fù)鋱D方式展示出業(yè)務(wù)關(guān)聯(lián)關(guān)系。

目前數(shù)據(jù)和業(yè)務(wù)之間沒有形成一套完整的管理流程，導(dǎo)致數(shù)據(jù)成為服務(wù)業(yè)務(wù)的工具而不是數(shù)據(jù)與業(yè)務(wù)的合作。現(xiàn)在的業(yè)務(wù)拓?fù)鋱D譜的數(shù)據(jù)關(guān)聯(lián)可視化方面，都是通過業(yè)務(wù)人員和數(shù)據(jù)人員的配合，導(dǎo)致不僅效率低、工作量大、成本高、時間長、效果差等缺點(diǎn)。

發(fā)明內(nèi)容

本發(fā)明提供一種自動生成業(yè)務(wù)拓?fù)鋱D譜的數(shù)據(jù)關(guān)聯(lián)可視化方法及系統(tǒng)，旨在解決現(xiàn)有業(yè)務(wù)數(shù)據(jù)處理工作量大、成本高、效果差等問題。

本發(fā)明提供一種自動生成業(yè)務(wù)拓?fù)鋱D譜的數(shù)據(jù)關(guān)聯(lián)可視化方法包括以下步驟：

S1.系統(tǒng)接入數(shù)據(jù)，通過數(shù)據(jù)處理模塊把所有接入的數(shù)據(jù)經(jīng)過清洗后入庫，對數(shù)據(jù)做好標(biāo)注；

S2.對處理后的數(shù)據(jù)通過業(yè)務(wù)規(guī)則編排模塊進(jìn)行業(yè)務(wù)規(guī)則的編排；

S3.對編排后的數(shù)據(jù)輸入到業(yè)務(wù)關(guān)系生成模塊中，調(diào)用業(yè)務(wù)關(guān)系生成服務(wù)，生成數(shù)據(jù)與業(yè)務(wù)之間的關(guān)聯(lián)關(guān)系；

S4.將關(guān)聯(lián)關(guān)系通過可視化模塊以拓?fù)浞绞秸宫F(xiàn)。

作為本發(fā)明的進(jìn)一步改進(jìn)，所述步驟S1中的數(shù)據(jù)清洗流程包括：

S11a.系統(tǒng)調(diào)用定制算法集成的數(shù)據(jù)清洗子系統(tǒng)；

S11b.通過服務(wù)接口或直接連接數(shù)據(jù)庫接入待處理的數(shù)據(jù)；

S11c.數(shù)據(jù)接入模塊按照制定的規(guī)則函數(shù)自動檢查數(shù)據(jù)；

S11d.數(shù)據(jù)接入模塊處理有問題數(shù)據(jù)，并對數(shù)據(jù)進(jìn)行修改和補(bǔ)充屬性的操作。

作為本發(fā)明的進(jìn)一步改進(jìn)，所述步驟S1中的數(shù)據(jù)標(biāo)注流程包括：

S12a.系統(tǒng)調(diào)用定制算法集成的數(shù)據(jù)標(biāo)注子系統(tǒng)；

S12b.按系統(tǒng)制定的接入規(guī)則接入清洗后的數(shù)據(jù)；