[發(fā)明專利]日志數(shù)據(jù)處理方法及裝置

在審

• 申請?zhí)枺?/td>: 202011541825.6
• 申請日: 2020-12-23
• 公開（公告）號: CN112559479A
• 公開（公告）日: 2021-03-26
• 發(fā)明（設(shè)計）人: 張毅;王志華;王志海;喻波;安鵬
• 申請（專利權(quán)）人: 北京明朝萬達(dá)科技股份有限公司
• 主分類號: G06F16/18
• 分類號: G06F16/18;G06F16/17
• 代理公司: 北京潤澤恒知識產(chǎn)權(quán)代理有限公司 11319
• 代理人: 莎日娜

本申請實施例提供了一種日志數(shù)據(jù)處理方法及裝置。所述方法包括：獲取客戶端的用戶的日志數(shù)據(jù)；其中，所述日志數(shù)據(jù)中包括目標(biāo)參數(shù)；根據(jù)所述日志數(shù)據(jù)以及預(yù)設(shè)的分組規(guī)則，將所述用戶進(jìn)行分組，得到目標(biāo)群組；其中，所述分組規(guī)則中包括每個群組對應(yīng)的所述目標(biāo)參數(shù)的參數(shù)范圍；根據(jù)每個所述目標(biāo)群組的用戶的日志數(shù)據(jù)，生成處理數(shù)據(jù)；其中，所述處理數(shù)據(jù)包括第一處理數(shù)據(jù)以及第二處理數(shù)據(jù)中的至少一種；第一處理數(shù)據(jù)中包括每個所述目標(biāo)群組的參數(shù)統(tǒng)計值；所述第二處理數(shù)據(jù)中包括所述目標(biāo)群組的所述用戶的所述目標(biāo)參數(shù)。本申請實施例提供了一種基于日志數(shù)據(jù)，獲得數(shù)據(jù)安全防護(hù)狀態(tài)的方式。

技術(shù)領(lǐng)域

本申請涉及互聯(lián)網(wǎng)技術(shù)領(lǐng)域，尤其涉及一種日志數(shù)據(jù)處理方法及裝置。

背景技術(shù)

近年來，隨著互聯(lián)網(wǎng)行業(yè)的迅速發(fā)展，用戶所產(chǎn)生的日志數(shù)據(jù)的數(shù)據(jù)量都幾乎呈爆炸式增長，例如企業(yè)級用戶的數(shù)據(jù)防護(hù)日志。具體地，數(shù)據(jù)防護(hù)日志的產(chǎn)生是由于企業(yè)處于數(shù)據(jù)安全考慮，在管控過程中采用一定的防護(hù)手段對數(shù)據(jù)進(jìn)行防護(hù)，進(jìn)而產(chǎn)生大量的數(shù)據(jù)防護(hù)日志。日志可分為事件日志和消息日志，現(xiàn)有技術(shù)中，日志數(shù)據(jù)通常用于處理歷史數(shù)據(jù)以及理解系統(tǒng)的活動等作用。

發(fā)明內(nèi)容

本申請實施例提供一種日志數(shù)據(jù)處理方法及裝置，以提供一種基于日志數(shù)據(jù)，獲得數(shù)據(jù)安全防護(hù)狀態(tài)的方式。

一方面，本申請實施例提供了一種日志數(shù)據(jù)處理方法，所述方法包括：

獲取客戶端的用戶的日志數(shù)據(jù)；其中，所述日志數(shù)據(jù)中包括目標(biāo)參數(shù)；

根據(jù)所述日志數(shù)據(jù)以及預(yù)設(shè)的分組規(guī)則，將所述用戶進(jìn)行分組，得到目標(biāo)群組；其中，所述分組規(guī)則中包括每個群組對應(yīng)的所述目標(biāo)參數(shù)的參數(shù)范圍；

根據(jù)每個所述目標(biāo)群組的用戶的日志數(shù)據(jù)，生成處理數(shù)據(jù)；

其中，所述處理數(shù)據(jù)包括第一處理數(shù)據(jù)以及第二處理數(shù)據(jù)中的至少一種；第一處理數(shù)據(jù)中包括每個所述目標(biāo)群組的參數(shù)統(tǒng)計值；所述第二處理數(shù)據(jù)中包括所述目標(biāo)群組的所述用戶的所述目標(biāo)參數(shù)。

可選地，所述根據(jù)所述日志數(shù)據(jù)以及預(yù)設(shè)的分組規(guī)則，將所述用戶進(jìn)行分組，得到目標(biāo)群組，包括：

針對每個所述用戶，

根據(jù)所述分組規(guī)則，確定所述用戶的對應(yīng)的目標(biāo)群組；其中，所述目標(biāo)群組的目標(biāo)參數(shù)的參數(shù)范圍，包括所述用戶的目標(biāo)參數(shù)。

可選地，若所述處理數(shù)據(jù)包括所述第一處理數(shù)據(jù)，所述根據(jù)每個所述目標(biāo)群組的用戶的日志數(shù)據(jù)，生成處理數(shù)據(jù)，包括：

針對每個所述目標(biāo)群組，統(tǒng)計所述目標(biāo)群組內(nèi)的參數(shù)統(tǒng)計值；其中，所述參數(shù)統(tǒng)計值為根據(jù)所述目標(biāo)群組內(nèi)的所述用戶的目標(biāo)參數(shù)確定的；

根據(jù)每個所述目標(biāo)群組內(nèi)的參數(shù)統(tǒng)計值，生成第一處理數(shù)據(jù)。

可選地，所述參數(shù)統(tǒng)計值為根據(jù)預(yù)設(shè)的權(quán)值，對每個所述目標(biāo)參數(shù)的統(tǒng)計值加權(quán)求和得到的；

所述統(tǒng)計值包括每個所述目標(biāo)參數(shù)的均值或中位數(shù)。

可選地，所述針對每個所述目標(biāo)群組，統(tǒng)計所述目標(biāo)群組內(nèi)的參數(shù)統(tǒng)計值之后，所述方法還包括：

根據(jù)所述統(tǒng)計值，調(diào)整所述分組規(guī)則中，所述目標(biāo)群組對應(yīng)的所述目標(biāo)參數(shù)的參數(shù)范圍。

可選地，所述將所述用戶進(jìn)行分組，得到目標(biāo)群組之后，所述方法還包括：

根據(jù)所述目標(biāo)群組對應(yīng)的預(yù)設(shè)群屬性，確定與所述目標(biāo)群組對應(yīng)的處理操作；

對所述目標(biāo)群組內(nèi)的用戶，執(zhí)行所述處理操作。

可選地，所述獲取客戶端的用戶的日志數(shù)據(jù)之后，所述方法還包括：

根據(jù)預(yù)設(shè)的清洗規(guī)則，對所述日志數(shù)據(jù)進(jìn)行清洗，并將清洗后的數(shù)據(jù)封裝成預(yù)設(shè)數(shù)據(jù)格式的數(shù)據(jù)。