[發(fā)明專利]埋點(diǎn)數(shù)據(jù)處理方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202111502628.8
• 申請(qǐng)日: 2021-12-09
• 公開（公告）號(hào): CN114154073A
• 公開（公告）日: 2022-03-08
• 發(fā)明（設(shè)計(jì)）人: 李闖;王維科;王超;董紅順;王紅瓅;陳乃明
• 申請(qǐng)（專利權(quán)）人: 航天信息股份有限公司
• 主分類號(hào): G06F16/9535
• 分類號(hào): G06F16/9535;G06F16/958
• 代理公司: 北京合智同創(chuàng)知識(shí)產(chǎn)權(quán)代理有限公司 11545
• 代理人: 李杰

本發(fā)明提供一種埋點(diǎn)數(shù)據(jù)處理方法及系統(tǒng)，該埋點(diǎn)數(shù)據(jù)處理方法包括：封裝客戶端的瀏覽器將接收的業(yè)務(wù)數(shù)據(jù)以及功能數(shù)據(jù)以預(yù)定義的數(shù)據(jù)記錄格式進(jìn)行記錄，得到埋點(diǎn)數(shù)據(jù)；當(dāng)所述埋點(diǎn)數(shù)據(jù)的數(shù)量達(dá)到預(yù)設(shè)閾值或者所述客戶端被關(guān)閉時(shí)，所述瀏覽器將所述埋點(diǎn)數(shù)據(jù)上傳至服務(wù)器；所述服務(wù)器將所述埋點(diǎn)數(shù)據(jù)存儲(chǔ)至消息隊(duì)列中，并在運(yùn)行壓力小于預(yù)設(shè)閾值時(shí)，對(duì)所述埋點(diǎn)數(shù)據(jù)進(jìn)行處理，以及將處理后的埋點(diǎn)數(shù)據(jù)存入數(shù)據(jù)庫(kù)中。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，更具體地講，涉及一種埋點(diǎn)數(shù)據(jù)處理方法及系統(tǒng)。

背景技術(shù)

對(duì)于采用客戶端與服務(wù)端交互形式的應(yīng)用，功能種類的設(shè)置、功能位置的擺放、功能按鈕的排布，對(duì)用戶的使用都會(huì)產(chǎn)生較大影響，并且在推廣初期及后期功能拓展中，如何根據(jù)用戶的需求、喜好、習(xí)慣來布置功能結(jié)構(gòu)、功能點(diǎn)擊功能擺放及按鈕設(shè)置，需要強(qiáng)大的埋點(diǎn)數(shù)據(jù)解析模型作為支撐，如何更加高效、有效的獲取埋點(diǎn)數(shù)據(jù)，成為了應(yīng)用生命周期中的重要過程。

發(fā)明內(nèi)容

本發(fā)明的實(shí)施例的目的在于提供一種埋點(diǎn)數(shù)據(jù)處理方法及系統(tǒng)，以在有效降低系統(tǒng)復(fù)雜性，保證系統(tǒng)運(yùn)行穩(wěn)定性前提下，依賴業(yè)務(wù)數(shù)據(jù)但不依賴業(yè)務(wù)系統(tǒng)的情況下，高效的將客戶端埋點(diǎn)數(shù)據(jù)發(fā)送至服務(wù)端并進(jìn)行持久化。

第一方面，本發(fā)明提供一種埋點(diǎn)數(shù)據(jù)處理方法，其特征在于，包括：

封裝客戶端的瀏覽器將接收的業(yè)務(wù)數(shù)據(jù)以及功能數(shù)據(jù)以預(yù)定義的數(shù)據(jù)記錄格式進(jìn)行記錄，得到埋點(diǎn)數(shù)據(jù)；

當(dāng)所述埋點(diǎn)數(shù)據(jù)的數(shù)量達(dá)到預(yù)設(shè)閾值或者所述客戶端被關(guān)閉時(shí)，所述瀏覽器將所述埋點(diǎn)數(shù)據(jù)上傳至服務(wù)器；

所述服務(wù)器將所述埋點(diǎn)數(shù)據(jù)存儲(chǔ)至消息隊(duì)列中，并在運(yùn)行壓力小于預(yù)設(shè)閾值時(shí)，對(duì)所述埋點(diǎn)數(shù)據(jù)進(jìn)行處理，以及將處理后的埋點(diǎn)數(shù)據(jù)存入數(shù)據(jù)庫(kù)中。

進(jìn)一步地，所述客戶端為C++封裝瀏覽器內(nèi)核形式存在的EXE應(yīng)用，所述埋點(diǎn)數(shù)據(jù)包括：菜單ID、模塊ID、應(yīng)用ID及用戶信息及本機(jī)的MAC信息和時(shí)間戳數(shù)據(jù)。

進(jìn)一步地，所述瀏覽器將所述埋點(diǎn)數(shù)據(jù)上傳至服務(wù)器的步驟包括：

所述瀏覽器將所述埋點(diǎn)數(shù)據(jù)進(jìn)行g(shù)zip壓縮后，進(jìn)行base64編碼，得到編碼后的所述埋點(diǎn)數(shù)據(jù)；

所述瀏覽器將編碼后的所述埋點(diǎn)數(shù)據(jù)上傳至服務(wù)器。

進(jìn)一步地，所述服務(wù)器對(duì)所述埋點(diǎn)數(shù)據(jù)進(jìn)行處理的步驟包括：

所述服務(wù)器從隊(duì)列中獲取數(shù)據(jù)，然后進(jìn)行解碼、解壓操作，操作后得到原始數(shù)據(jù)，并對(duì)原始數(shù)據(jù)進(jìn)行解析，解析后形成批量存儲(chǔ)的數(shù)據(jù)形式。

進(jìn)一步地，所述封裝客戶端的瀏覽器將接收的業(yè)務(wù)數(shù)據(jù)以及功能數(shù)據(jù)以預(yù)定義的數(shù)據(jù)記錄格式進(jìn)行記錄的步驟包括：

封裝客戶端的瀏覽器將接收的業(yè)務(wù)數(shù)據(jù)以及功能數(shù)據(jù)以預(yù)定義的數(shù)據(jù)記錄格式在內(nèi)存中進(jìn)行記錄。

第二方面，一種埋點(diǎn)數(shù)據(jù)處理系統(tǒng)包括：

封裝客戶端的瀏覽器，用于將接收的業(yè)務(wù)數(shù)據(jù)以及功能數(shù)據(jù)以預(yù)定義的數(shù)據(jù)記錄格式進(jìn)行記錄，得到埋點(diǎn)數(shù)據(jù)；當(dāng)所述埋點(diǎn)數(shù)據(jù)的數(shù)量達(dá)到預(yù)設(shè)閾值或者所述客戶端被關(guān)閉時(shí)，將所述埋點(diǎn)數(shù)據(jù)上傳至服務(wù)器；

所述服務(wù)器，用于將所述埋點(diǎn)數(shù)據(jù)存儲(chǔ)至消息隊(duì)列中，并在運(yùn)行壓力小于預(yù)設(shè)閾值時(shí)，對(duì)所述埋點(diǎn)數(shù)據(jù)進(jìn)行處理，以及將處理后的埋點(diǎn)數(shù)據(jù)存入數(shù)據(jù)庫(kù)中。

進(jìn)一步地，所述客戶端為C++封裝瀏覽器內(nèi)核形式存在的EXE應(yīng)用，所述埋點(diǎn)數(shù)據(jù)包括：菜單ID、模塊ID、應(yīng)用ID及用戶信息及本機(jī)的MAC信息和時(shí)間戳數(shù)據(jù)。

進(jìn)一步地，所述瀏覽器具體用于：將所述埋點(diǎn)數(shù)據(jù)進(jìn)行g(shù)zip壓縮后，進(jìn)行base64編碼，得到編碼后的所述埋點(diǎn)數(shù)據(jù)，以及將編碼后的所述埋點(diǎn)數(shù)據(jù)上傳至服務(wù)器。