[發(fā)明專利]數(shù)據(jù)分析方法、系統(tǒng)、可讀存儲(chǔ)介質(zhì)及計(jì)算機(jī)設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 202210851818.9
• 申請(qǐng)日: 2022-07-20
• 公開(kāi)（公告）號(hào): CN114996360B
• 公開(kāi)（公告）日: 2022-11-18
• 發(fā)明（設(shè)計(jì)）人: 章建群;樊振軍
• 申請(qǐng)（專利權(quán)）人: 江西現(xiàn)代職業(yè)技術(shù)學(xué)院
• 主分類號(hào): G06F16/27
• 分類號(hào): G06F16/27;G06F16/25;G06F16/2455;G06F16/22;G06K9/62
• 代理公司: 南昌新天下專利商標(biāo)代理有限公司 36115
• 代理人: 戴繼翔

1.一種數(shù)據(jù)分析方法，其特征在于，包括：

接收終端設(shè)備發(fā)送的待分析數(shù)據(jù)，基于所述待分析數(shù)據(jù)的數(shù)據(jù)類型確定對(duì)應(yīng)的數(shù)據(jù)提取方式，并利用所述數(shù)據(jù)提取方式提取所述待分析數(shù)據(jù)中的每個(gè)區(qū)別數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)；

將每個(gè)所述基礎(chǔ)數(shù)據(jù)中基礎(chǔ)指標(biāo)相同的基礎(chǔ)數(shù)據(jù)進(jìn)行組合，以得到多個(gè)基礎(chǔ)數(shù)據(jù)集；

抓取各所述基礎(chǔ)數(shù)據(jù)集所對(duì)應(yīng)的數(shù)據(jù)領(lǐng)域區(qū)塊，并提取各所述區(qū)別數(shù)據(jù)中的特征指標(biāo)，利用哈希表算法計(jì)算出各所述特征指標(biāo)在各所述數(shù)據(jù)領(lǐng)域區(qū)塊中出現(xiàn)的頻次；

根據(jù)各所述特征指標(biāo)在各所述數(shù)據(jù)領(lǐng)域區(qū)塊中出現(xiàn)的頻次將所述待分析數(shù)據(jù)拆分為多個(gè)待分析子數(shù)據(jù)；

計(jì)算出各所述待分析子數(shù)據(jù)的優(yōu)先級(jí)系數(shù)，并根據(jù)各所述待分析子數(shù)據(jù)的優(yōu)先級(jí)系數(shù)依次對(duì)各所述待分析子數(shù)據(jù)進(jìn)行數(shù)據(jù)分析。

2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)分析方法，其特征在于，基于所述待分析數(shù)據(jù)的數(shù)據(jù)類型確定對(duì)應(yīng)的數(shù)據(jù)提取方式的步驟之前，所述方法還包括：

提取所述待分析數(shù)據(jù)中具有唯一標(biāo)識(shí)的字符串序列；

將所述字符串序列輸入至預(yù)設(shè)的字符串序列表中進(jìn)行數(shù)據(jù)對(duì)比，并根據(jù)數(shù)據(jù)對(duì)比結(jié)果確定所述待分析數(shù)據(jù)的數(shù)據(jù)類型。

3.根據(jù)權(quán)利要求1所述的數(shù)據(jù)分析方法，其特征在于，基于所述待分析數(shù)據(jù)的數(shù)據(jù)類型確定對(duì)應(yīng)的數(shù)據(jù)提取方式，并利用所述數(shù)據(jù)提取方式提取所述待分析數(shù)據(jù)中的每個(gè)區(qū)別數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)的步驟包括：

當(dāng)所述待分析數(shù)據(jù)的數(shù)據(jù)類型為文本數(shù)據(jù)時(shí)，對(duì)所述待分析數(shù)據(jù)進(jìn)行預(yù)處理；

利用詞袋模型將預(yù)處理后的待分析數(shù)據(jù)表示為數(shù)值向量，以得到所述待分析數(shù)據(jù)的數(shù)值特征矩陣；

根據(jù)所述數(shù)值特征矩陣得到所述待分析數(shù)據(jù)中的每個(gè)區(qū)別數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)。

4.根據(jù)權(quán)利要求1所述的數(shù)據(jù)分析方法，其特征在于，基于所述待分析數(shù)據(jù)的數(shù)據(jù)類型確定對(duì)應(yīng)的數(shù)據(jù)提取方式，并利用所述數(shù)據(jù)提取方式提取所述待分析數(shù)據(jù)中的每個(gè)區(qū)別數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)的步驟包括：

當(dāng)所述待分析數(shù)據(jù)的數(shù)據(jù)類型為圖像數(shù)據(jù)時(shí)，對(duì)所述待分析數(shù)據(jù)進(jìn)行平滑處理，以得到第一處理數(shù)據(jù)；

利用有限差分法計(jì)算出所述第一處理數(shù)據(jù)的梯度幅值和梯度方向，并對(duì)所述梯度幅值進(jìn)行非極大值抑制處理，以得到第二處理數(shù)據(jù)；

對(duì)所述第二處理數(shù)據(jù)進(jìn)行像素點(diǎn)及邊緣提取，以得到所述第二處理數(shù)據(jù)的每個(gè)區(qū)別數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)。

5.根據(jù)權(quán)利要求3或4所述的數(shù)據(jù)分析方法，其特征在于，將每個(gè)所述基礎(chǔ)數(shù)據(jù)中基礎(chǔ)指標(biāo)相同的基礎(chǔ)數(shù)據(jù)進(jìn)行組合，以得到多個(gè)基礎(chǔ)數(shù)據(jù)集的步驟包括：

利用關(guān)鍵數(shù)據(jù)庫(kù)對(duì)各所述基礎(chǔ)數(shù)據(jù)進(jìn)行關(guān)鍵數(shù)據(jù)提取，以得到各所述基礎(chǔ)數(shù)據(jù)的關(guān)鍵數(shù)據(jù)；

利用標(biāo)準(zhǔn)數(shù)據(jù)庫(kù)對(duì)各所述基礎(chǔ)數(shù)據(jù)的關(guān)鍵數(shù)據(jù)進(jìn)行相似特征對(duì)比，以得到各所述基礎(chǔ)數(shù)據(jù)的相似特征度量；

根據(jù)各所述基礎(chǔ)數(shù)據(jù)的相似特征度量對(duì)各所述基礎(chǔ)數(shù)據(jù)進(jìn)行聚類，以得到多個(gè)基礎(chǔ)數(shù)據(jù)集。

6.根據(jù)權(quán)利要求1所述的數(shù)據(jù)分析方法，其特征在于，計(jì)算出各所述待分析子數(shù)據(jù)的優(yōu)先級(jí)系數(shù)的步驟包括：

獲取處理器的運(yùn)存空間，并基于所述處理器的運(yùn)存空間計(jì)算出各所述待分析子數(shù)據(jù)所占用所述處理器的運(yùn)存空間的數(shù)值；

根據(jù)各所述待分析子數(shù)據(jù)所占用所述處理器的運(yùn)存空間的數(shù)值計(jì)算出各所述待分析子數(shù)據(jù)的優(yōu)先級(jí)系數(shù)。

7.一種數(shù)據(jù)分析系統(tǒng)，其特征在于，包括：

數(shù)據(jù)提取模塊，用于接收終端設(shè)備發(fā)送的待分析數(shù)據(jù)，基于所述待分析數(shù)據(jù)的數(shù)據(jù)類型確定對(duì)應(yīng)的數(shù)據(jù)提取方式，并利用所述數(shù)據(jù)提取方式提取所述待分析數(shù)據(jù)中的每個(gè)區(qū)別數(shù)據(jù)和基礎(chǔ)數(shù)據(jù)；

數(shù)據(jù)組合模塊，用于將每個(gè)所述基礎(chǔ)數(shù)據(jù)中基礎(chǔ)指標(biāo)相同的基礎(chǔ)數(shù)據(jù)進(jìn)行組合，以得到多個(gè)基礎(chǔ)數(shù)據(jù)集；

數(shù)據(jù)計(jì)算模塊，用于抓取各所述基礎(chǔ)數(shù)據(jù)集所對(duì)應(yīng)的數(shù)據(jù)領(lǐng)域區(qū)塊，并提取各所述區(qū)別數(shù)據(jù)中的特征指標(biāo)，利用哈希表算法計(jì)算出各所述特征指標(biāo)在各所述數(shù)據(jù)領(lǐng)域區(qū)塊中出現(xiàn)的頻次；

數(shù)據(jù)拆分模塊，用于根據(jù)各所述特征指標(biāo)在各所述數(shù)據(jù)領(lǐng)域區(qū)塊中出現(xiàn)的頻次將所述待分析數(shù)據(jù)拆分為多個(gè)待分析子數(shù)據(jù)；

數(shù)據(jù)分析模塊，用于計(jì)算出各所述待分析子數(shù)據(jù)的優(yōu)先級(jí)系數(shù)，并根據(jù)各所述待分析子數(shù)據(jù)的優(yōu)先級(jí)系數(shù)依次對(duì)各所述待分析子數(shù)據(jù)進(jìn)行數(shù)據(jù)分析。