[發明專利]數據分析方法、系統、可讀存儲介質及計算機設備

有效

• 申請號: 202210851818.9
• 申請日: 2022-07-20
• 公開（公告）號: CN114996360B
• 公開（公告）日: 2022-11-18
• 發明（設計）人: 章建群;樊振軍
• 申請（專利權）人: 江西現代職業技術學院
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/25;G06F16/2455;G06F16/22;G06K9/62
• 代理公司: 南昌新天下專利商標代理有限公司 36115
• 代理人: 戴繼翔

本發明提供一種數據分析方法、系統、可讀存儲介質及計算機設備，方法包括：基于終端設備發送的待分析數據的數據類型確定數據提取方式，并利用數據提取方式提取待分析數據中的每個區別數據和基礎數據；將基礎指標相同的基礎數據進行組合得到多個基礎數據集；抓取各基礎數據集的數據領域區塊，并提取各區別數據中的特征指標，計算出各特征指標在各數據領域區塊中出現的頻次；根據各頻次將待分析數據拆分為多個待分析子數據；計算出各待分析子數據的優先級系數，并根據優先級系數依次對各待分析子數據進行數據分析。本發明使得各待分析子數據的處理能夠根據優先級系數來依次進行，進而避免同步執行任務影響分析速率以及增加分析時間的問題。

技術領域

本發明涉及數據處理技術領域，特別涉及一種數據分析方法、系統、可讀存儲介質及計算機設備。

背景技術

隨著科技的飛速發展和人們生活水平的提高，各類數據也層出不窮，因此，隨著各類數據的迅速增長，對于數據的分析需求也越來越高。

在對數據信息進行分析時，通常是利用計算機設備將所有的數據帶入到各種數據庫中進行全方面分析，等全方面分析完成后將所有的分析結果進行展示，然而隨著數據庫以及待分析數據的數據量的增大，數據分析的過程又需要分析所有的數據內容，較大數據量的待分析數據需要分析人員具備相應的數據開發能力，并且在數據分析過程中會導致占用計算機設備較多的運行空間，導致設備出現發熱、卡頓甚至死機等現象，進而導致分析時間較長、影響工作效率以及分析效率。

發明內容

基于此，本發明的目的是提供一種數據分析方法、系統、可讀存儲介質及計算機設備，以至少解決上述技術中的不足。

本發明提出一種數據分析方法，包括：

接收終端設備發送的待分析數據，基于所述待分析數據的數據類型確定對應的數據提取方式，并利用所述數據提取方式提取所述待分析數據中的每個區別數據和基礎數據；

將每個所述基礎數據中基礎指標相同的基礎數據進行組合，以得到多個基礎數據集；

抓取各所述基礎數據集所對應的數據領域區塊，并提取各所述區別數據中的特征指標，利用哈希表算法計算出各所述特征指標在各所述數據領域區塊中出現的頻次；

根據各所述特征指標在各所述數據領域區塊中出現的頻次將所述待分析數據拆分為多個待分析子數據；

計算出各所述待分析子數據的優先級系數，并根據各所述待分析子數據的優先級系數依次對各所述待分析子數據進行數據分析。

進一步的，基于所述待分析數據的數據類型確定對應的數據提取方式的步驟之前，所述方法還包括：

提取所述待分析數據中具有唯一標識的字符串序列；

將所述字符串序列輸入至預設的字符串序列表中進行數據對比，并根據數據對比結果確定所述待分析數據的數據類型。

進一步的，基于所述待分析數據的數據類型確定對應的數據提取方式，并利用所述數據提取方式提取所述待分析數據中的每個區別數據和基礎數據的步驟包括：

當所述待分析數據的數據類型為文本數據時，對所述待分析數據進行預處理；

利用詞袋模型將預處理后的待分析數據表示為數值向量，以得到所述待分析數據的數值特征矩陣；

根據所述數值特征矩陣得到所述待分析數據中的每個區別數據和基礎數據。

進一步的，基于所述待分析數據的數據類型確定對應的數據提取方式，并利用所述數據提取方式提取所述待分析數據中的每個區別數據和基礎數據的步驟包括：

當所述待分析數據的數據類型為圖像數據時，對所述待分析數據進行平滑處理，以得到第一處理數據；

利用有限差分法計算出所述第一處理數據的梯度幅值和梯度方向，并對所述梯度幅值進行非極大值抑制處理，以得到第二處理數據；

對所述第二處理數據進行像素點及邊緣提取，以得到所述第二處理數據的每個區別數據和基礎數據。