[發明專利]數據檢測方法、裝置、電子設備、存儲介質和程序產品

在審

• 申請號: 202110269345.7
• 申請日: 2021-03-12
• 公開（公告）號: CN113010571A
• 公開（公告）日: 2021-06-22
• 發明（設計）人: 胡建園
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/25;G06N3/04;G06N3/08
• 代理公司: 北京銀龍知識產權代理有限公司 11243
• 代理人: 許靜;黃燦

1.一種數據檢測方法，包括：

獲取目標數據的特征信息；

將所述特征信息作為第一模型輸入對所述目標數據進行第一預測，得到第一預測結果；

在所述第一預測結果表示所述目標數據不存在異常的情況下，使用第二模型對所述目標數據進行第二預測，得到第二預測結果；

在所述第一預測結果或者所述第二預測結果表示所述目標數據異常的情況下，確定所述目標數據對應的源數據。

2.根據權利要求1所述的方法，其中，所述獲取目標數據的特征信息包括：

對日志數據進行加工，得到目標時間區間內的目標數據，并提取所述目標數據的特征信息，其中，所述特征信息包括：所述目標時間區間內的日志特征信息和所述目標數據的字段熱點內容的分布占比信息。

3.根據權利要求1所述的方法，其中，所述第一模型包括第一層和第二層，其中，所述第一層包括：N個子模型，其中，所述N個子模型中第一個子模型的輸入包括所述特征信息，所述N個子模型中第i個子模型的輸入包括第i-1個子模型的輸出，且所述N個子模型中第i個子模型的輸出的維度低于第i-1個子模型的輸出的維度，i大于1，小于或者等于所述N的整數；

所述第二層的輸入包括所述N個子模型中最后一個子模型的輸出，所述第二層的輸出為所述第一預測結果。

4.根據權利要求1所述的方法，其中，所述第二模型包括生成器和判別器，所述在所述第一預測結果表示所述目標數據不存在異常的情況下，使用第二模型對所述目標數據進行第二預測，得到第二預測結果，包括：

在所述第一預測結果表示所述目標數據不存在異常的情況下，通過所述生成器將所述特征信息生成虛擬數據，并使用所述判別器對所述虛擬數據進行第二預測，得到所述第二預測結果。

5.根據權利要求1所述的方法，所述方法還包括：

建立所述目標數據包括的多個字段的數據血緣關系；

所述在所述第一預測結果或者所述第二預測結果表示所述目標數據異常的情況下，確定所述目標數據對應的源數據，包括：

在所述第一預測結果或者所述第二預測結果表示所述目標數據異常的情況下，確定所述目標數據的異常字段，并基于所述異常字段的數據血緣關系確定產生所述異常字段的源數據。

6.一種數據檢測裝置，包括：

獲取模塊，用于獲取目標數據的特征信息；

第一預測模塊，用于將所述特征信息作為第一模型輸入對所述目標數據進行第一預測，得到第一預測結果；

第二預測模塊，用于在所述第一預測結果表示所述目標數據不存在異常的情況下，使用第二模型對所述目標數據進行第二預測，得到第二預測結果；

確定模塊，用于在所述第一預測結果或者所述第二預測結果表示所述目標數據異常的情況下，確定所述目標數據對應的源數據。

7.根據權利要求6所述的裝置，其中，所述獲取模塊用于對日志數據進行加工，得到目標時間區間內的目標數據，并提取所述目標數據的特征信息，其中，所述特征信息包括：所述目標時間區間內的日志特征信息和所述目標數據的字段熱點內容的分布占比信息。

8.根據權利要求6所述的裝置，其中，所述第一模型包括第一層和第二層，其中，所述第一層包括：N個子模型，其中，所述N個子模型中第一個子模型的輸入包括所述特征信息，所述N個子模型中第i個子模型的輸入包括第i-1個子模型的輸出，且所述N個子模型中第i個子模型的輸出的維度低于第i-1個子模型的輸出的維度，i大于1，小于或者等于所述N的整數；

所述第二層的輸入包括所述N個子模型中最后一個子模型的輸出，所述第二層的輸出為所述第一預測結果。

9.根據權利要求6所述的裝置，其中，所述第二模型包括生成器和判別器，所述在所述第一預測結果表示所述目標數據不存在異常的情況下，所述第二預測模塊用于在所述第一預測結果表示所述目標數據不存在異常的情況下，通過所述生成器將所述特征信息生成虛擬數據，并使用所述判別器對所述虛擬數據進行第二預測，得到所述第二預測結果。