[發(fā)明專利]數(shù)據(jù)處理的方法、裝置、存儲(chǔ)介質(zhì)以及電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202211099376.3
• 申請(qǐng)日: 2022-09-08
• 公開（公告）號(hào): CN115640187A
• 公開（公告）日: 2023-01-24
• 發(fā)明（設(shè)計(jì)）人: 李天浩;雷賽齡;黃子豪;趙正陽(yáng)
• 申請(qǐng)（專利權(quán)）人: 中國(guó)工商銀行股份有限公司
• 主分類號(hào): G06F11/30
• 分類號(hào): G06F11/30;G06F11/34;G06F16/215
• 代理公司: 北京康信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 周春枚

1.一種數(shù)據(jù)處理的方法，其特征在于，包括：

獲取預(yù)設(shè)時(shí)間段內(nèi)不同的訪問(wèn)設(shè)備對(duì)交易系統(tǒng)的訪問(wèn)數(shù)據(jù)，得到多個(gè)訪問(wèn)數(shù)據(jù)，其中，每個(gè)訪問(wèn)數(shù)據(jù)中至少包括以下信息：訪問(wèn)設(shè)備的設(shè)備ID、訪問(wèn)時(shí)間；

根據(jù)設(shè)備ID對(duì)所述多個(gè)訪問(wèn)數(shù)據(jù)進(jìn)行分組，得到多個(gè)數(shù)據(jù)集合，其中，每個(gè)數(shù)據(jù)集合中的訪問(wèn)數(shù)據(jù)的設(shè)備ID相同；

分別遍歷每個(gè)數(shù)據(jù)集合中的訪問(wèn)數(shù)據(jù)，在遍歷的過(guò)程中生成標(biāo)識(shí)，依次根據(jù)當(dāng)前遍歷的訪問(wèn)數(shù)據(jù)的訪問(wèn)時(shí)間更新所述標(biāo)識(shí)，并在每次更新所述標(biāo)識(shí)的過(guò)程中對(duì)所述數(shù)據(jù)集合中重復(fù)出現(xiàn)的訪問(wèn)數(shù)據(jù)進(jìn)行去重，直至遍歷完畢，得到多個(gè)去重后的數(shù)據(jù)集合，其中，所述標(biāo)識(shí)用于記錄已遍歷的各個(gè)訪問(wèn)數(shù)據(jù)的訪問(wèn)時(shí)間，所述重復(fù)出現(xiàn)的訪問(wèn)數(shù)據(jù)是指設(shè)備ID和訪問(wèn)時(shí)間均相同的訪問(wèn)數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，在遍歷的過(guò)程中生成標(biāo)識(shí)包括：

獲取所述數(shù)據(jù)集合中的訪問(wèn)數(shù)據(jù)的最大訪問(wèn)時(shí)間和最小訪問(wèn)時(shí)間；

計(jì)算所述最大訪問(wèn)時(shí)間和所述最小訪問(wèn)時(shí)間的時(shí)間差，得到第一差值，并生成標(biāo)志位數(shù)量為所述第一差值的初始標(biāo)識(shí)；

將所述初始標(biāo)識(shí)中的每個(gè)標(biāo)志位的參數(shù)均設(shè)置為第一預(yù)設(shè)值，得到所述標(biāo)識(shí)。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，依次根據(jù)當(dāng)前遍歷的訪問(wèn)數(shù)據(jù)的訪問(wèn)時(shí)間更新標(biāo)識(shí)，并在每次更新標(biāo)識(shí)的過(guò)程中對(duì)所述數(shù)據(jù)集合中重復(fù)出現(xiàn)的訪問(wèn)數(shù)據(jù)進(jìn)行去重，直至遍歷完畢，得到多個(gè)去重后的數(shù)據(jù)集合包括：

讀取所述數(shù)據(jù)集合中的任意訪問(wèn)數(shù)據(jù)，得到第一訪問(wèn)數(shù)據(jù)，并獲取所述第一訪問(wèn)數(shù)據(jù)的訪問(wèn)時(shí)間，得到第一訪問(wèn)時(shí)間；

根據(jù)所述第一訪問(wèn)時(shí)間生成所述數(shù)據(jù)集合的時(shí)間戳，將所述第一訪問(wèn)數(shù)據(jù)移動(dòng)至所述數(shù)據(jù)集合對(duì)應(yīng)的數(shù)據(jù)池中，并更新數(shù)據(jù)集合，其中，所述時(shí)間戳表征的當(dāng)前已遍歷的訪問(wèn)數(shù)據(jù)的最大訪問(wèn)時(shí)間，所述數(shù)據(jù)池用于存儲(chǔ)去重后的訪問(wèn)數(shù)據(jù)；

讀取更新后的數(shù)據(jù)集合中的任意訪問(wèn)數(shù)據(jù)，得到第二訪問(wèn)數(shù)據(jù)，并獲取所述第二訪問(wèn)數(shù)據(jù)的訪問(wèn)時(shí)間，得到第二訪問(wèn)時(shí)間；

通過(guò)所述第二訪問(wèn)時(shí)間、所述時(shí)間戳和所述標(biāo)識(shí)判斷所述第二訪問(wèn)數(shù)據(jù)是否為重復(fù)出現(xiàn)的訪問(wèn)數(shù)據(jù)，得到判斷結(jié)果，根據(jù)所述判斷結(jié)果更新所述時(shí)間戳、所述標(biāo)識(shí)和所述數(shù)據(jù)集合，直至所述數(shù)據(jù)集合為空集，并根據(jù)所述數(shù)據(jù)池中的多個(gè)訪問(wèn)數(shù)據(jù)確定所述去重后的數(shù)據(jù)集合。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，通過(guò)所述第二訪問(wèn)時(shí)間、所述時(shí)間戳和所述標(biāo)識(shí)判斷所述第二訪問(wèn)數(shù)據(jù)是否位重復(fù)出現(xiàn)的訪問(wèn)數(shù)據(jù)，得到判斷結(jié)果，根據(jù)所述判斷結(jié)果更新所述時(shí)間戳、所述標(biāo)識(shí)和所述數(shù)據(jù)集合包括：

對(duì)所述第二訪問(wèn)時(shí)間與所述時(shí)間戳進(jìn)行比較；

在所述第二訪問(wèn)時(shí)間大于所述時(shí)間戳的情況下，根據(jù)所述第二訪問(wèn)時(shí)間和所述時(shí)間戳將所述標(biāo)識(shí)進(jìn)行變更，得到更新后的標(biāo)識(shí)，將所述時(shí)間戳變更為所述第二訪問(wèn)時(shí)間，得到更新后的時(shí)間戳，并將所述第二訪問(wèn)數(shù)據(jù)移動(dòng)至所述數(shù)據(jù)集合對(duì)應(yīng)的數(shù)據(jù)池中；

在所述第二訪問(wèn)時(shí)間等于所述時(shí)間戳的情況下，刪除所述第二訪問(wèn)數(shù)據(jù)；

在所述第二訪問(wèn)時(shí)間小于所述時(shí)間戳的情況下，通過(guò)所述第二訪問(wèn)時(shí)間、所述標(biāo)識(shí)和所述時(shí)間戳判斷所述第二訪問(wèn)數(shù)據(jù)是否為重復(fù)出現(xiàn)的數(shù)據(jù)。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述標(biāo)識(shí)中包括多個(gè)標(biāo)志位，以及每個(gè)標(biāo)志位的參數(shù)，在所述第二訪問(wèn)時(shí)間大于所述時(shí)間戳的情況下，根據(jù)所述第二訪問(wèn)時(shí)間和所述時(shí)間戳將所述標(biāo)識(shí)進(jìn)行變更，得到更新后的標(biāo)識(shí)包括：

確定所述標(biāo)識(shí)中參數(shù)為第二預(yù)設(shè)值的標(biāo)志位的位數(shù)，得到多個(gè)第一位數(shù)，其中，所述第二預(yù)設(shè)值與所述第一預(yù)設(shè)值不同；

依次將所述時(shí)間戳與每個(gè)所述第一位數(shù)相減，得到多個(gè)已出現(xiàn)的訪問(wèn)時(shí)間，并將所述多個(gè)已出現(xiàn)的訪問(wèn)時(shí)間和所述時(shí)間戳確定為多個(gè)已出現(xiàn)訪問(wèn)時(shí)間；

確定所述第二訪問(wèn)時(shí)間與每個(gè)已出現(xiàn)訪問(wèn)時(shí)間之間的時(shí)間差，得到多個(gè)第三時(shí)間差；

在所述標(biāo)識(shí)中將每個(gè)第三時(shí)間差對(duì)應(yīng)的標(biāo)志位的參數(shù)更新為第二預(yù)設(shè)值，并將所述標(biāo)識(shí)中的其余標(biāo)志位的參數(shù)設(shè)置為所述第一預(yù)設(shè)值，得到所述更新后的標(biāo)識(shí)。