[發(fā)明專利]一種大數(shù)據(jù)研發(fā)中心數(shù)據(jù)分析系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110466240.0
• 申請(qǐng)日: 2021-04-28
• 公開(kāi)（公告）號(hào): CN113342787A
• 公開(kāi)（公告）日: 2021-09-03
• 發(fā)明（設(shè)計(jì)）人: 方永偉
• 申請(qǐng)（專利權(quán)）人: 杭州千島湖點(diǎn)通信息技術(shù)有限公司
• 主分類號(hào): G06F16/215
• 分類號(hào): G06F16/215;G06F16/951
• 代理公司: 深圳至誠(chéng)化育知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44728
• 代理人: 劉英

本發(fā)明公開(kāi)了一種大數(shù)據(jù)研發(fā)中心數(shù)據(jù)分析系統(tǒng)，本發(fā)明的有益效果是，通過(guò)大數(shù)據(jù)輸入分類系統(tǒng)將網(wǎng)上的語(yǔ)音信息、圖像信息、視頻信息、文本信息、行業(yè)信息、輿情信息收集并且按照SQL算法將信息數(shù)據(jù)篩分，通過(guò)數(shù)據(jù)審查評(píng)估系統(tǒng)按照SQL算法將云端的數(shù)據(jù)進(jìn)行對(duì)比，從而達(dá)到確保不會(huì)出現(xiàn)重復(fù)數(shù)據(jù)，通過(guò)大數(shù)據(jù)儲(chǔ)存顯示系統(tǒng)將數(shù)據(jù)顯示出來(lái)。

技術(shù)領(lǐng)域

本發(fā)明涉及大數(shù)據(jù)技術(shù)領(lǐng)域，特別是一種大數(shù)據(jù)研發(fā)中心數(shù)據(jù)分析系統(tǒng)。

背景技術(shù)

信息分析主要是根據(jù)事物、現(xiàn)象、數(shù)據(jù)和信息的屬性、特征、本質(zhì)、規(guī)律和相關(guān)性進(jìn)行定性和定量分析，以發(fā)現(xiàn)新的知識(shí)，因此，信息分析是基于事物、現(xiàn)象、數(shù)據(jù)和信息之間的因果關(guān)系或相互關(guān)系，關(guān)系是指事物之間因時(shí)間、秩序、結(jié)構(gòu)、運(yùn)動(dòng)等而產(chǎn)生的聯(lián)系，包括時(shí)間、空間、發(fā)生和發(fā)展的邏輯，包括過(guò)程，如工業(yè)過(guò)程、商業(yè)過(guò)程等，規(guī)律，如生命的生命周期、自然運(yùn)動(dòng)規(guī)律等，樣本微觀分析：信息分析取數(shù)據(jù)，信息和現(xiàn)象作為對(duì)象，一般從整體或整體中選取部分樣本進(jìn)行分析，稱為樣本分析或抽樣分析，在大數(shù)據(jù)服務(wù)逐漸興起的當(dāng)下，大數(shù)據(jù)的信息分析是互聯(lián)網(wǎng)服務(wù)至關(guān)重要的一環(huán)。

現(xiàn)有技術(shù)中，大數(shù)據(jù)信息分析多通過(guò)機(jī)器學(xué)習(xí)算法進(jìn)行分析學(xué)習(xí)，學(xué)習(xí)分析的速度及準(zhǔn)確率主要由算力決定，而中小型公司無(wú)法滿足大數(shù)據(jù)信息分析的計(jì)算學(xué)習(xí)算力要求的算力服務(wù)器配置，影響到對(duì)大數(shù)據(jù)信息分析的準(zhǔn)確性和即時(shí)性，影響到大數(shù)據(jù)信息服務(wù)分析的發(fā)展，并且大數(shù)據(jù)中數(shù)據(jù)繁雜，重復(fù)的數(shù)據(jù)流也嚴(yán)重影響到數(shù)據(jù)分析的精度，不能很好的滿足大數(shù)據(jù)信息分析需要，因此亟需一種大數(shù)據(jù)信息分析系統(tǒng)來(lái)滿足算力供給不足的需要，鑒于此，針對(duì)上述問(wèn)題深入研究，遂有本案產(chǎn)生。

發(fā)明內(nèi)容

本發(fā)明的目的是為了解決上述問(wèn)題，設(shè)計(jì)了一種大數(shù)據(jù)研發(fā)中心數(shù)據(jù)分析系統(tǒng)，解決了現(xiàn)有的大數(shù)據(jù)容易出現(xiàn)數(shù)據(jù)堆積的現(xiàn)象。

實(shí)現(xiàn)上述目的本發(fā)明的技術(shù)方案為：一種大數(shù)據(jù)研發(fā)中心數(shù)據(jù)分析系統(tǒng)，包括:大數(shù)據(jù)輸入分類系統(tǒng)、數(shù)據(jù)審查評(píng)估系統(tǒng)以及大數(shù)據(jù)儲(chǔ)存顯示系統(tǒng)，所述大數(shù)據(jù)輸入分類系統(tǒng)連接于數(shù)據(jù)審查評(píng)估系統(tǒng)，且所述大數(shù)據(jù)輸入分類系統(tǒng)為數(shù)據(jù)審查評(píng)估系統(tǒng)子系統(tǒng)，所述數(shù)據(jù)審查評(píng)估系統(tǒng)連接于大數(shù)據(jù)儲(chǔ)存顯示系統(tǒng)，且所述數(shù)據(jù)審查評(píng)估系統(tǒng)為大數(shù)據(jù)儲(chǔ)存顯示系統(tǒng)子系統(tǒng)；

所述大數(shù)據(jù)輸入分類系統(tǒng)包含有：大數(shù)據(jù)采集模塊、大數(shù)據(jù)信息輸入模塊以及大數(shù)據(jù)信息鑒定模塊；

所述大數(shù)據(jù)采集模塊輸出端連接于大數(shù)據(jù)信息輸入模塊，所述大數(shù)據(jù)信息輸入模塊輸出端連接于大數(shù)據(jù)信息鑒定模塊，所述大數(shù)據(jù)采集模塊用于對(duì)大數(shù)據(jù)進(jìn)行端口采集，所述大數(shù)據(jù)信息輸入模塊將大數(shù)據(jù)的基本信息輸入到大數(shù)據(jù)信息鑒定模塊內(nèi)。

優(yōu)選的，所述數(shù)據(jù)審查評(píng)估系統(tǒng)包含有：數(shù)據(jù)字段提取模塊、數(shù)據(jù)字段篩重模塊以及數(shù)據(jù)預(yù)存儲(chǔ)模塊；

所述數(shù)據(jù)字段提取模塊輸入端與大數(shù)據(jù)信息鑒定模塊連接，所述數(shù)據(jù)字段提取模塊輸出端連接于數(shù)據(jù)字段篩重模塊，所述數(shù)據(jù)字段篩重模塊輸出端連接于數(shù)據(jù)預(yù)存儲(chǔ)模塊，所述數(shù)據(jù)字段提取模塊于大數(shù)據(jù)儲(chǔ)存顯示系統(tǒng)進(jìn)行對(duì)比將數(shù)據(jù)字段中重復(fù)段落提取，所述數(shù)據(jù)字段篩重模塊將提取后的數(shù)據(jù)字段進(jìn)行去重，所述數(shù)據(jù)預(yù)存儲(chǔ)模塊存儲(chǔ)篩重后待分析的數(shù)據(jù)進(jìn)行短時(shí)記憶，且在大數(shù)據(jù)儲(chǔ)存顯示系統(tǒng)運(yùn)行完成后直接刪除。

優(yōu)選的，所述大數(shù)據(jù)儲(chǔ)存顯示系統(tǒng)包含有：云計(jì)算平臺(tái)資料收集模塊、平臺(tái)管理模塊以及顯示模塊；

所述云計(jì)算平臺(tái)資料收集模塊輸出端連接于平臺(tái)管理模塊，所述平臺(tái)管理模塊輸出端連接于顯示模塊，所述云計(jì)算平臺(tái)資料收集模塊連接于數(shù)據(jù)預(yù)存儲(chǔ)模塊，所述云計(jì)算平臺(tái)資料收集模塊將數(shù)據(jù)預(yù)存儲(chǔ)模塊內(nèi)的數(shù)據(jù)收錄。

優(yōu)選的，所述大數(shù)據(jù)采集模塊互聯(lián)網(wǎng)采集方式、爬蟲(chóng)采集和傳感器采集中的一種。

優(yōu)選的，所述大數(shù)據(jù)信息輸入模塊數(shù)據(jù)定義包括日期時(shí)間、大小和數(shù)據(jù)類型定義。

優(yōu)選的，所述平臺(tái)管理模塊為云備份服務(wù)器。

優(yōu)選的，所述數(shù)據(jù)字段篩重模塊SQL算法。