[發(fā)明專利]一種用戶訪問數(shù)據(jù)的處理方法、裝置及計算機系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202011579066.2
• 申請日: 2020-12-28
• 公開（公告）號: CN112685456A
• 公開（公告）日: 2021-04-20
• 發(fā)明（設(shè)計）人: 沈志敏;彭虎
• 申請（專利權(quán)）人: 江蘇蘇寧云計算有限公司
• 主分類號: G06F16/2457
• 分類號: G06F16/2457;G06F16/2458;G06Q10/06
• 代理公司: 北京市萬慧達律師事務(wù)所 11111
• 代理人: 陳怡

本申請公開了一種用戶訪問數(shù)據(jù)的處理方法、裝置及計算機系統(tǒng)，所述方法包括獲取第一訪問數(shù)據(jù)，所述訪問數(shù)據(jù)包括用戶編碼、訪問日期及目標維度值；根據(jù)用戶編碼與目標維度值都相同的第一訪問數(shù)據(jù)對應(yīng)的訪問日期，生成對應(yīng)的日期編碼；根據(jù)所述日期編碼、所述日期編碼對應(yīng)的目標維度值及用戶編碼，生成目標訪問記錄，本申請將用戶的訪問數(shù)據(jù)根據(jù)訪問日期及目標維度值進行合并，將多條原始的第一訪問數(shù)據(jù)合并生成了訪問記錄，大大減小了歷史用戶數(shù)據(jù)的數(shù)據(jù)量，提升了數(shù)據(jù)的分析效率，且后續(xù)產(chǎn)生新的訪問數(shù)據(jù)時可以通過更新日期編碼的方式將新的訪問數(shù)據(jù)更新到訪問記錄中，保證了后續(xù)的維護效率。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，尤其涉及一種用戶訪問數(shù)據(jù)的處理方法、裝置及計算機系統(tǒng)。

背景技術(shù)

隨著數(shù)據(jù)分析技術(shù)的發(fā)展，用戶行為數(shù)據(jù)指標可以對企業(yè)的決策、運營起到關(guān)鍵性作用。而為了采集用戶行為數(shù)據(jù)指標并分析，需要將增量數(shù)據(jù)與歷史關(guān)聯(lián)數(shù)據(jù)進行比較。然而，歷史用戶行為數(shù)據(jù)常常未經(jīng)處理，并存儲在不同的分區(qū)中。所以當每次需要進行歷史關(guān)聯(lián)數(shù)據(jù)提取時，需要從每一分區(qū)中提取相應(yīng)的用戶行為數(shù)據(jù)，然后處理生成歷史關(guān)聯(lián)數(shù)據(jù)。而分區(qū)中日志域明細數(shù)量龐大，導(dǎo)致讀取時需要消耗大量IO資源；且數(shù)據(jù)處理過程也需要消耗大量CPU計算資源，耗時很長。

發(fā)明內(nèi)容

為了解決現(xiàn)有技術(shù)的不足，本發(fā)明的主要目的在于提供一種用戶訪問數(shù)據(jù)的處理方法、裝置及計算機系統(tǒng)，以解決現(xiàn)有技術(shù)的上述問題。

為了達到上述目的，第一方面本發(fā)明提供了一種用戶訪問數(shù)據(jù)的處理方法，所述方法包括：

獲取第一訪問數(shù)據(jù)，所述訪問數(shù)據(jù)包括用戶編碼、訪問日期及目標維度值；

根據(jù)用戶編碼與目標維度值都相同的第一訪問數(shù)據(jù)對應(yīng)的訪問日期，生成對應(yīng)的日期編碼；

根據(jù)所述日期編碼、所述日期編碼對應(yīng)的目標維度值及用戶編碼，生成目標訪問記錄。

在一些實施例中，所述根據(jù)用戶編碼與目標維度值都相同的第一訪問數(shù)據(jù)對應(yīng)的訪問日期，生成對應(yīng)的日期編碼包括：

生成初始編碼，所述初始編碼包括用于記錄編碼值的編碼位；

獲取用戶編碼與目標維度值都相同的第一訪問數(shù)據(jù)對應(yīng)的訪問日期并排序，確定每一獲取的訪問日期對應(yīng)的排序；

根據(jù)獲取的訪問日期對應(yīng)的排序，確定每一獲取的訪問日期對應(yīng)的編碼位；

將所述初始編碼包括的所述對應(yīng)的編碼位的編碼值設(shè)置為第二編碼值，除所述對應(yīng)的編碼位外的每一編碼位對應(yīng)的編碼值設(shè)置為第一編碼值；

確定設(shè)置后的所述初始編碼為對應(yīng)的日期編碼。

在一些實施例中，所述方法包括：

獲取第二訪問數(shù)據(jù)；

確定包含了所述第二訪問數(shù)據(jù)包括的目標維度值及用戶編碼的目標訪問記錄為所述第二訪問數(shù)據(jù)對應(yīng)的目標訪問記錄；

根據(jù)所述第二訪問數(shù)據(jù)對應(yīng)的訪問日期及所述對應(yīng)的目標訪問記錄對應(yīng)的日期編碼，生成更新的日期編碼；

將所述對應(yīng)的目標訪問記錄對應(yīng)的日期編碼更新為所述更新的日期編碼。

在一些實施例中，所述獲取第一訪問數(shù)據(jù)包括：

從待處理數(shù)據(jù)表中獲取用戶原始訪問數(shù)據(jù)；

根據(jù)所述用戶原始訪問數(shù)據(jù)包括的用戶編碼、訪問日期以及目標維度對應(yīng)的目標維度值，生成第一訪問數(shù)據(jù)。

在一些實施例中，所述日期編碼為二進制編碼。

在一些實施例中，所述方法包括：

統(tǒng)計每一所述日期編碼中包含的第二編碼值的數(shù)量，生成第一統(tǒng)計值；