[發(fā)明專利]一種異常數(shù)據(jù)處理的方法、裝置、電子設(shè)備、計(jì)算機(jī)可讀介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010564616.7
• 申請日: 2020-06-19
• 公開（公告）號: CN111813765A
• 公開（公告）日: 2020-10-23
• 發(fā)明（設(shè)計(jì)）人: 劉浩;柳超
• 申請（專利權(quán)）人: 北京金堤科技有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/24
• 代理公司: 北京康盛知識產(chǎn)權(quán)代理有限公司 11331
• 代理人: 董娣

1.一種異常數(shù)據(jù)處理的方法，其特征在于，包括：

查找對象的歷史變更記錄；其中，所述歷史變更記錄中的每條記錄數(shù)據(jù)至少包括目標(biāo)字段的歷史信息；

獲取所述目標(biāo)字段的當(dāng)前信息，將所述目標(biāo)字段的當(dāng)前信息與所述目標(biāo)字段的歷史信息進(jìn)行比對，從所述歷史變更記錄中的記錄數(shù)據(jù)中確定出抖動數(shù)據(jù)；

根據(jù)預(yù)設(shè)的處理策略，對所述歷史變更記錄中的抖動數(shù)據(jù)進(jìn)行處理。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述歷史變更記錄中每條記錄數(shù)據(jù)還包括時(shí)間字段的信息；

查找對象的歷史變更記錄的步驟包括：

根據(jù)預(yù)設(shè)的時(shí)段篩選條件以及對象的標(biāo)識信息，查找所述對象的歷史變更記錄，其中，所述歷史變更記錄中每條記錄數(shù)據(jù)還包括時(shí)間字段的信息符合所述預(yù)設(shè)的時(shí)段篩選條件。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，將所述目標(biāo)字段的當(dāng)前信息與所述目標(biāo)字段的歷史信息進(jìn)行比對，從所述歷史變更記錄中的記錄數(shù)據(jù)中確定出抖動數(shù)據(jù)的步驟包括：

將所述目標(biāo)字段的當(dāng)前信息，與所述目標(biāo)字段的歷史信息進(jìn)行比對，確定所述目標(biāo)字段的歷史信息與當(dāng)前信息的相似度；

根據(jù)所述相似度，從所述歷史變更記錄中的記錄數(shù)據(jù)中確定出抖動數(shù)據(jù)。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，根據(jù)所述相似度，從所述歷史變更記錄中的記錄數(shù)據(jù)中確定出抖動數(shù)據(jù)的步驟包括：

根據(jù)所述相似度，調(diào)取分類模型；

根據(jù)所述分類模型對所述歷史變更記錄中的記錄數(shù)據(jù)進(jìn)行分類處理，以從所述歷史變更記錄中的記錄數(shù)據(jù)確定出抖動數(shù)據(jù)。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，在根據(jù)所述相似度，調(diào)取分類模型之前，還包括：

獲取訓(xùn)練數(shù)據(jù)集，所述訓(xùn)練數(shù)據(jù)集中包括已分類的抖動數(shù)據(jù)和非抖動數(shù)據(jù)；

根據(jù)所述訓(xùn)練數(shù)據(jù)集以及預(yù)選的特征集、訓(xùn)練閾值，通過決策樹學(xué)習(xí)得到初始分類模塊；

對所述初始分類模型進(jìn)行修剪，得到分類模型。

6.根據(jù)權(quán)利要求1-5任一項(xiàng)所述的方法，其特征在于，所述歷史變更記錄中每條記錄數(shù)據(jù)還包括統(tǒng)計(jì)字段的信息，所述預(yù)設(shè)的處理策略包括刪除處理；

根據(jù)預(yù)設(shè)的處理策略，對所述歷史變更記錄中的抖動數(shù)據(jù)進(jìn)行處理的步驟包括：

將所述歷史變更記錄中的抖動數(shù)據(jù)進(jìn)行刪除，并生成刪除記錄信息。

7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述預(yù)設(shè)的處理策略還包括統(tǒng)計(jì)處理；

根據(jù)預(yù)設(shè)的處理策略，對所述歷史變更記錄中的抖動數(shù)據(jù)進(jìn)行處理的步驟還包括：

根據(jù)所述抖動數(shù)據(jù)的統(tǒng)計(jì)字段的信息，對所述抖動數(shù)據(jù)進(jìn)行統(tǒng)計(jì)處理，得到統(tǒng)計(jì)處理結(jié)果；

存儲所述刪除記錄信息和/或統(tǒng)計(jì)處理結(jié)果。

8.根據(jù)權(quán)利要求6所述的方法，其特征在于，在存儲所述刪除記錄信息和統(tǒng)計(jì)處理結(jié)果之后，還包括：

將所述刪除記錄信息和統(tǒng)計(jì)處理結(jié)果發(fā)送至可視化模塊；和/或

根據(jù)所述統(tǒng)計(jì)處理結(jié)果生成告警信息。

9.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述統(tǒng)計(jì)字段至少包括以下一種：數(shù)據(jù)源，所屬地區(qū)、變更時(shí)間、版本。

10.一種異常數(shù)據(jù)處理的裝置，其特征在于，包括：

查找模塊，用于查找對象的歷史變更記錄；其中，所述歷史變更記錄中每條記錄數(shù)據(jù)至少包括目標(biāo)字段的歷史信息；

比對模塊，用于將所述目標(biāo)字段的當(dāng)前信息，與所述目標(biāo)字段的歷史信息進(jìn)行比對，從所述歷史變更記錄中的記錄數(shù)據(jù)中確定出抖動數(shù)據(jù)；

執(zhí)行模塊，用于根據(jù)預(yù)設(shè)的處理策略，對所述歷史變更記錄中的抖動數(shù)據(jù)進(jìn)行處理。

11.一種電子設(shè)備，其特征在于，包括：

一個(gè)或多個(gè)處理器；

存儲裝置，用于存儲一個(gè)或多個(gè)程序，

當(dāng)所述一個(gè)或多個(gè)程序被所述一個(gè)或多個(gè)處理器執(zhí)行，使得所述一個(gè)或多個(gè)處理器實(shí)現(xiàn)如權(quán)利要求1-9中任一所述的方法。

12.一種計(jì)算機(jī)可讀介質(zhì)，其上存儲有計(jì)算機(jī)程序，其特征在于，所述程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1-9中任一所述的方法。