[發(fā)明專利]數(shù)據(jù)處理方法及裝置

有效

• 申請?zhí)枺?/td>: 201810895106.0
• 申請日: 2018-08-08
• 公開（公告）號: CN109189822B
• 公開（公告）日: 2022-01-14
• 發(fā)明（設(shè)計）人: 楊競霜
• 申請（專利權(quán)）人: 北京大數(shù)據(jù)研究院
• 主分類號: G06F16/2458
• 分類號: G06F16/2458
• 代理公司: 北京林達劉知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11277
• 代理人: 劉新宇

1.一種數(shù)據(jù)處理方法，其特征在于，所述方法包括：

對統(tǒng)計時間區(qū)間內(nèi)接收到的多個待處理數(shù)據(jù)進行預(yù)處理，確定所述多個待處理數(shù)據(jù)的標(biāo)識，所述標(biāo)識用于確定待處理數(shù)據(jù)的類別和/或來源；

根據(jù)所述多個待處理數(shù)據(jù)的出現(xiàn)時間以及所述統(tǒng)計時間區(qū)間內(nèi)的多個目標(biāo)時間段，對所述多個待處理數(shù)據(jù)進行分組處理，獲取多個數(shù)據(jù)組；所述數(shù)據(jù)組的數(shù)量為所述統(tǒng)計時間區(qū)間的時長與所述目標(biāo)時間段的時長的比值；

根據(jù)所述多個數(shù)據(jù)組中的待處理數(shù)據(jù)的標(biāo)識，獲取每個數(shù)據(jù)組中的待處理數(shù)據(jù)的標(biāo)識及第一出現(xiàn)次數(shù)，所述第一出現(xiàn)次數(shù)為待處理數(shù)據(jù)的標(biāo)識在每個數(shù)據(jù)組中的出現(xiàn)次數(shù)；

根據(jù)所述多個數(shù)據(jù)組、所述多個數(shù)據(jù)組中待處理數(shù)據(jù)的標(biāo)識及所述第一出現(xiàn)次數(shù)，獲取第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識及第二出現(xiàn)次數(shù)，所述第二出現(xiàn)次數(shù)為所述第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識在所述第一時間窗內(nèi)的出現(xiàn)次數(shù)；所述第一時間窗的長度為所述目標(biāo)時間段的時長的M倍，M為大于2的整數(shù)；及

以所述目標(biāo)時間段的時長為單位移動所述第一時間窗，獲取移動后的第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識及第三出現(xiàn)次數(shù)，所述第三出現(xiàn)次數(shù)為所述移動后的第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識在所述移動后的第一時間窗內(nèi)的出現(xiàn)次數(shù)。

2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，對統(tǒng)計時間區(qū)間內(nèi)接收到的多個待處理數(shù)據(jù)進行預(yù)處理，確定所述多個待處理數(shù)據(jù)的標(biāo)識，包括：

將所述多個待處理數(shù)據(jù)的類別或來源的信息轉(zhuǎn)化為所述標(biāo)識，所述標(biāo)識為0-K的整數(shù)標(biāo)識。

3.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述多個數(shù)據(jù)組為N個，其中，所述目標(biāo)時間段的時長小于所述統(tǒng)計時間區(qū)間的時長，N為所述統(tǒng)計時間區(qū)間的時長與所述目標(biāo)時間段的時長的比值。

4.根據(jù)權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述方法還包括：

根據(jù)多個所述第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識及對應(yīng)待處理數(shù)據(jù)的第二出現(xiàn)次數(shù)和/或所述移動后的第一時間窗的待處理數(shù)據(jù)的標(biāo)識及對應(yīng)待處理數(shù)據(jù)的第三出現(xiàn)次數(shù)獲取第二時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識及對應(yīng)待處理數(shù)據(jù)的第四出現(xiàn)次數(shù)，其中，所述第二時間窗的長度大于所述第一時間窗的長度。

5.根據(jù)權(quán)利要求4所述的數(shù)據(jù)處理方法，其特征在于，所述方法還包括：

根據(jù)所述第一時間窗和/或所述第二時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識、對應(yīng)待處理數(shù)據(jù)的第四出現(xiàn)次數(shù)獲取第三時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識及對應(yīng)待處理數(shù)據(jù)的第五出現(xiàn)次數(shù)，其中，所述第三時間窗的長度大于所述第二時間窗的長度。

6.一種數(shù)據(jù)處理裝置，其特征在于，所述裝置包括：

預(yù)處理模塊，被配置為對統(tǒng)計時間區(qū)間內(nèi)接收到的多個待處理數(shù)據(jù)進行預(yù)處理，確定所述多個待處理數(shù)據(jù)的標(biāo)識，所述標(biāo)識用于確定待處理數(shù)據(jù)的類別和/或來源；

分組模塊，連接于所述預(yù)處理模塊，被配置為根據(jù)所述多個待處理數(shù)據(jù)的出現(xiàn)時間以及所述統(tǒng)計時間區(qū)間內(nèi)的多個目標(biāo)時間段，對所述多個待處理數(shù)據(jù)進行分組處理，獲取多個數(shù)據(jù)組；

第一獲取模塊，連接于所述分組模塊，被配置為根據(jù)所述多個數(shù)據(jù)組中的待處理數(shù)據(jù)的標(biāo)識及第一出現(xiàn)次數(shù)，獲取每個數(shù)據(jù)組中的待處理數(shù)據(jù)的標(biāo)識及第一出現(xiàn)次數(shù)，所述第一出現(xiàn)次數(shù)為待處理數(shù)據(jù)的標(biāo)識在每個數(shù)據(jù)組中的出現(xiàn)次數(shù)；

第二獲取模塊，連接于所述第一獲取模塊，被配置為根據(jù)所述多個數(shù)據(jù)組、所述多個數(shù)據(jù)組中待處理數(shù)據(jù)的標(biāo)識及所述第一出現(xiàn)次數(shù)，獲取第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識及第二出現(xiàn)次數(shù)，所述第二出現(xiàn)次數(shù)為所述第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識在所述第一時間窗內(nèi)的出現(xiàn)次數(shù)；及

第三獲取模塊，連接于所述第二獲取模塊，被配置為以所述目標(biāo)時間段的時長為單位移動所述第一時間窗，獲取移動后的第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識及第三出現(xiàn)次數(shù)，所述第三出現(xiàn)次數(shù)為所述移動后的第一時間窗內(nèi)的待處理數(shù)據(jù)的標(biāo)識在所述移動后的第一時間窗內(nèi)的出現(xiàn)次數(shù)。

7.根據(jù)權(quán)利要求6所述的數(shù)據(jù)處理裝置，其特征在于，所述預(yù)處理模塊包括：

第一確定子模塊，將所述多個待處理數(shù)據(jù)的類別或來源的信息轉(zhuǎn)化為所述標(biāo)識，所述標(biāo)識為0-K的整數(shù)標(biāo)識。

8.根據(jù)權(quán)利要求6所述的數(shù)據(jù)處理裝置，其特征在于，所述多個數(shù)據(jù)組為N個，其中，所述目標(biāo)時間段的時長小于所述統(tǒng)計時間區(qū)間的時長，N為所述統(tǒng)計時間區(qū)間的時長與所述目標(biāo)時間段的時長的比值。