[發(fā)明專(zhuān)利]一種多維數(shù)據(jù)采集和精確關(guān)聯(lián)的系統(tǒng)及其方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202010955927.6
• 申請(qǐng)日: 2020-09-11
• 公開(kāi)（公告）號(hào): CN112052298A
• 公開(kāi)（公告）日: 2020-12-08
• 發(fā)明（設(shè)計(jì)）人: 王駿濤
• 申請(qǐng)（專(zhuān)利權(quán)）人: 武漢眾騰智創(chuàng)信息技術(shù)有限公司
• 主分類(lèi)號(hào): G06F16/28
• 分類(lèi)號(hào): G06F16/28;G06F16/27
• 代理公司: 暫無(wú)信息
• 代理人: 暫無(wú)信息

本發(fā)明涉及大數(shù)據(jù)信息采集分析領(lǐng)域，且公開(kāi)了一種多維數(shù)據(jù)采集和精確關(guān)聯(lián)的系統(tǒng)及其方法，包括多維數(shù)據(jù)采集單元、數(shù)據(jù)倉(cāng)庫(kù)單元、數(shù)據(jù)治理單元、數(shù)據(jù)關(guān)聯(lián)單元和關(guān)聯(lián)評(píng)分單元；多維數(shù)據(jù)采集單元和數(shù)據(jù)治理單元，數(shù)據(jù)治理單元和數(shù)據(jù)倉(cāng)庫(kù)單元、數(shù)據(jù)關(guān)聯(lián)單元交互，數(shù)據(jù)關(guān)聯(lián)單元和數(shù)據(jù)倉(cāng)庫(kù)單元、關(guān)聯(lián)評(píng)分單元交互，關(guān)聯(lián)評(píng)分單元和數(shù)據(jù)倉(cāng)庫(kù)單元交互。該種多維數(shù)據(jù)采集和精確關(guān)聯(lián)的系統(tǒng)及其方法采用數(shù)據(jù)高效采集和治理方法、多維數(shù)據(jù)精確關(guān)聯(lián)和評(píng)分，本發(fā)明具有支持海量數(shù)據(jù)；數(shù)據(jù)采集效率和吞吐量高；多維數(shù)據(jù)關(guān)系更精確；系統(tǒng)可擴(kuò)展優(yōu)點(diǎn)和積極效果。

技術(shù)領(lǐng)域

本發(fā)明涉及大數(shù)據(jù)信息采集分析領(lǐng)域，具體為一種多維數(shù)據(jù)采集和精確關(guān)聯(lián)的系統(tǒng)及其方法。

背景技術(shù)

2020年5月27日，由大數(shù)據(jù)戰(zhàn)略重點(diǎn)實(shí)驗(yàn)室研究編著、社會(huì)科學(xué)文獻(xiàn)出版社出版的大數(shù)據(jù)最新理論成果《大數(shù)據(jù)藍(lán)皮書(shū)：中國(guó)大數(shù)據(jù)發(fā)展報(bào)告No.4》在國(guó)家大數(shù)據(jù)(貴州)綜合試驗(yàn)區(qū)展示中心網(wǎng)絡(luò)首發(fā)，該書(shū)創(chuàng)造性地提出“數(shù)博指數(shù)”，亦稱(chēng)“貴陽(yáng)指數(shù)”，通過(guò)指數(shù)構(gòu)建和數(shù)據(jù)分析，真實(shí)、客觀(guān)反映國(guó)家、地區(qū)和城市大數(shù)據(jù)發(fā)展和建設(shè)的發(fā)展現(xiàn)狀、特點(diǎn)、趨勢(shì)，展示地區(qū)數(shù)字中國(guó)建設(shè)取得的成就和問(wèn)題，據(jù)了解《大數(shù)據(jù)藍(lán)皮書(shū)：中國(guó)大數(shù)據(jù)發(fā)展報(bào)告No.4》是我國(guó)首部針對(duì)大數(shù)據(jù)領(lǐng)域進(jìn)行全面梳理和總結(jié)的藍(lán)皮書(shū)，自2017年首次編撰出版，至今已連續(xù)出版四冊(cè)，作為每屆數(shù)博會(huì)期間對(duì)外發(fā)布的重要理論創(chuàng)新成果，獲得了業(yè)界和社會(huì)的廣泛關(guān)注。

在公安行業(yè)，大數(shù)據(jù)應(yīng)用也是非常廣泛，但是由于數(shù)據(jù)種類(lèi)繁多，數(shù)據(jù)量大，導(dǎo)致數(shù)據(jù)采集效率低下，各類(lèi)數(shù)據(jù)無(wú)法進(jìn)行有效的關(guān)聯(lián)，無(wú)法將各類(lèi)信息關(guān)聯(lián)起來(lái)形成一個(gè)人的畫(huà)像，這個(gè)問(wèn)題已經(jīng)存在很多年，是一個(gè)亟待解決的問(wèn)題，因此就需要一套高效的海量數(shù)據(jù)裁采集和多維數(shù)據(jù)關(guān)聯(lián)的系統(tǒng)，系統(tǒng)對(duì)多維數(shù)據(jù)實(shí)現(xiàn)統(tǒng)一高效的采集，對(duì)多維數(shù)據(jù)進(jìn)行精準(zhǔn)的關(guān)聯(lián)評(píng)分，最后將實(shí)現(xiàn)多維數(shù)據(jù)的高效關(guān)聯(lián)和人物畫(huà)像的刻畫(huà)，徹底改變以往的數(shù)據(jù)分析模式，實(shí)現(xiàn)了多個(gè)維度的數(shù)據(jù)追蹤和分析。

發(fā)明內(nèi)容

（一）解決的技術(shù)問(wèn)題

針對(duì)現(xiàn)有技術(shù)的不足，本發(fā)明提供了一種多維數(shù)據(jù)采集和精確關(guān)聯(lián)的系統(tǒng)，具備時(shí)效性強(qiáng)、算法簡(jiǎn)單高效、算法穩(wěn)定精確、高可用和可擴(kuò)展等優(yōu)點(diǎn)，解決了背景技術(shù)提出的問(wèn)題。

（二）技術(shù)方案

為實(shí)現(xiàn)上述時(shí)效性強(qiáng)、算法簡(jiǎn)單高效、算法穩(wěn)定精確、高可用和可擴(kuò)展的目的，本發(fā)明提供如下技術(shù)方案：一種多維數(shù)據(jù)采集和精確關(guān)聯(lián)的系統(tǒng)，包括多維數(shù)據(jù)采集單元、數(shù)據(jù)倉(cāng)庫(kù)單元、數(shù)據(jù)治理單元、數(shù)據(jù)關(guān)聯(lián)單元和數(shù)據(jù)評(píng)分單元；多維數(shù)據(jù)采集單元和數(shù)據(jù)治理單元，數(shù)據(jù)治理單元和數(shù)據(jù)倉(cāng)庫(kù)單元、數(shù)據(jù)關(guān)聯(lián)單元交互，數(shù)據(jù)關(guān)聯(lián)單元和數(shù)據(jù)倉(cāng)庫(kù)單元、數(shù)據(jù)評(píng)分單元交互，數(shù)據(jù)評(píng)分單元和數(shù)據(jù)倉(cāng)庫(kù)單元交互；所述的多維數(shù)據(jù)采集單元包括多維數(shù)據(jù)采集1、2……N模塊，N是自然數(shù)，2≤N，所述的數(shù)據(jù)倉(cāng)庫(kù)單元是公共的數(shù)據(jù)存儲(chǔ)單元，為數(shù)據(jù)治理單元、數(shù)據(jù)倉(cāng)庫(kù)單元和數(shù)據(jù)關(guān)聯(lián)單元提供數(shù)據(jù)源和持久化方案，所述的數(shù)據(jù)治理單元包括依次交互的數(shù)據(jù)解析模塊、數(shù)據(jù)校驗(yàn)?zāi)K、數(shù)據(jù)格式化模塊，所述的數(shù)據(jù)關(guān)聯(lián)單元包括依次交互的數(shù)據(jù)抽取模塊、數(shù)據(jù)轉(zhuǎn)換模塊、數(shù)據(jù)消息化模塊和數(shù)據(jù)關(guān)聯(lián)算法，所述的數(shù)據(jù)評(píng)分單元包括依次交互的關(guān)聯(lián)數(shù)據(jù)抽取模塊和關(guān)聯(lián)數(shù)據(jù)評(píng)分算法。

優(yōu)選的，所述的多維數(shù)據(jù)采集單元其工作流程是：多維數(shù)據(jù)采集1、2……N模塊主要采集與人相關(guān)的一些信息，包括但不限于手機(jī)信息、人臉信息、車(chē)牌信息、購(gòu)物信息等；多維數(shù)據(jù)采集1、2……N模塊與設(shè)備交互的方式包括但不限于UDP協(xié)議、HTTP協(xié)議、FTP協(xié)議等。

優(yōu)選的，所述數(shù)據(jù)倉(cāng)庫(kù)單元其工作流程是：提供通用數(shù)據(jù)持久化方案，為各個(gè)單元提供統(tǒng)一的存儲(chǔ)接口；提供海量數(shù)據(jù)源，為各個(gè)單元提供統(tǒng)一且高效的數(shù)據(jù)抽取服務(wù)。