[發明專利]數據檢測方法及裝置、存儲介質及電子設備

在審

• 申請號: 202110949022.2
• 申請日: 2021-08-18
• 公開（公告）號: CN113656391A
• 公開（公告）日: 2021-11-16
• 發明（設計）人: 張振;阮宜龍;周文紅;楊磊;李念;安鵬振;張磊;陳盈;張苗苗;邢曉杰
• 申請（專利權）人: 中國電信股份有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06K9/62
• 代理公司: 北京律智知識產權代理有限公司 11438
• 代理人: 孫寶海;袁禮君

1.一種數據檢測方法，其特征在于，包括：

獲取待檢測數據，從所述待檢測數據中采集待檢測樣本，進而提取所述待檢測樣本的實際特征向量；

調取預測模型，根據所述預測模型確定與所述待檢測樣本對應的預測結果范圍；

根據所述實際特征向量和所述預測結果范圍確定所述待檢測數據的檢測結果；其中，所述檢測結果包括：異?；蛘！?/p>

2.根據權利要求1所述的方法，其特征在于，從所述待檢測數據中采集待檢測樣本，包括：

獲取抽樣標準，根據所述抽樣標準確定采樣數量；

從所述待檢測數據中，采用流處理技術采集滿足所述采樣數量的一批數據文件，以作為所述待檢測樣本。

3.根據權利要求1所述的方法，其特征在于，提取所述待檢測樣本的實際特征向量，包括：

獲取指標特征以及指標特征序列，確定所述待檢測樣本在所述指標特征下的特征值；

基于所述指標特征序列，根據所述特征值確定所述待檢測樣本的實際特征向量。

4.根據權利要求3所述的方法，其特征在于，確定所述待檢測樣本在所述指標特征下的特征值，包括：

判斷所述待檢測樣本中的數據文件是否具備特征描述字段；

若是，則根據所述特征描述字段獲取數據文件的特性描述信息，并基于所述特征描述字段與所述指標特征的對應關系，確定所述指標特征與所述特性描述信息的對應關系；若否，則基于所述指標特征對數據文件進行統計分析，得到數據文件的特性描述信息；

根據所述待檢測樣本中的數據文件的特性描述信息，確定所述待檢測樣本在所述指標特征下的特征值；

其中，所述指標特征包括：數據數量信息、占用空間信息、字段數信息、關鍵字信息、變化趨勢信息、震蕩幅度信息中的至少一個。

5.根據權利要求3所述的方法，其特征在于，基于所述指標特征序列，根據所述特征值確定所述待檢測樣本的實際特征向量，包括：

對所述指標特征下的特征值進行標準化處理，生成所述指標特征下的標準化特征值；

基于所述指標特征序列對所述標準化特征值進行排序，生成所述實際特征向量。

6.根據權利要求1所述的方法，其特征在于，所述預測模型是采用以下方式得到的：

獲取歷史數據和抽樣標準，以從所述歷史數據中確定預設數量個建模樣本；其中，建模樣本中的數據文件數量是根據所述抽樣標準確定的；

提取各建模樣本的標準化特征向量，并根據所述歷史數據確定均值特征向量，進而根據所述均值特征向量和所述各建模樣本的標準化特征向量確定所述預測模型中的回歸系數；以及，根據各建模樣本的標準化特征向量中的震蕩幅度信息確定波動系數閾值；

利用所述波動系數閾值和所述回歸系數搭建所述預測模型。

7.根據權利要求1所述的方法，其特征在于，根據所述實際特征向量和所述預測結果范圍確定所述待檢測數據的檢測結果，包括：

判斷所述實際特征向量是否在所述預測結果范圍內；若是，則所述檢測結果為正常；若否，則所述檢測結果為異常；以及，

在根據所述實際特征向量和所述預測結果范圍確定所述待檢測數據的檢測結果之后，還包括：

在所述檢測結果為異常的情況下，根據所述實際特征向量和所述預測結果范圍之間的偏差值進行告警或中斷數據傳輸。

8.一種數據檢測裝置，其特征在于，包括：

采集模塊，用于獲取待檢測數據，從所述待檢測數據中采集待檢測樣本，進而提取所述待檢測樣本的實際特征向量；

預測模塊，用于調取預測模型，根據所述預測模型確定與所述待檢測樣本對應的預測結果范圍；

檢測模塊，用于根據所述實際特征向量和所述預測結果范圍確定所述待檢測數據的檢測結果；其中，所述檢測結果包括：異常或正常。

9.一種計算機可讀存儲介質，其上存儲有計算機程序，所述程序被處理器執行時實現如權利要求1至7任一項所述的數據檢測方法。

10.一種電子設備，其特征在于，包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，當所述一個或多個程序被所述一個或多個處理器執行時，使得所述一個或多個處理器實現如權利要求1至7任一項所述的數據檢測方法。