[發明專利]埋點采集數據校驗的方法及裝置

在審

• 申請號: 202011491540.6
• 申請日: 2020-12-16
• 公開（公告）號: CN112486841A
• 公開（公告）日: 2021-03-12
• 發明（設計）人: 陳勇;盛浩;陶莉;孫遷;李成
• 申請（專利權）人: 江蘇蘇寧云計算有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京市萬慧達律師事務所 11111
• 代理人: 黃玉東

本發明公開一種埋點采集數據校驗的方法及裝置，涉及埋點測試技術領域，能夠有效解決測試環境與生產環境中訪問日志校驗規則不統一，校驗結果不準確的問題。該方法包括：統一測試環境和生產環境中埋點采集數據的校驗規則，并配置測試頁面的頁面參數和業務參數；定時從測試環境中獲取待測頁面的埋點采集數據，和/或，定時從生產環境中獲取待測頁面的埋點采集數據；基于埋點采集數據查找對應測試頁面的頁面參數和業務參數，根據校驗規則對埋點采集數據進行校驗，輸出校驗結果。該裝置應用有上述方案所提的方法。

技術領域

本發明涉及埋點測試技術領域，尤其涉及一種埋點采集數據校驗的方法及裝置。

背景技術

數據采集是大數據技術的第一步，埋點質量的高低直接影響下游數倉建設，人物畫像構成等。因此，提高埋點質量顯得尤其重要，現有埋點采集數據校驗的主要做法有下面兩種：

1、前端直接進行校驗，缺點在于校驗規則修改需要進行前端發布，不夠靈活，通用性不強，無法做到大批量頁面的校驗。同時，對于并發量高的網站影響前端性能。

2、后端校驗離線數據，缺點在于由于測試環境、生產環境的不相通，校驗規則存在環境間的差異，往往會影響校驗結果的準確性。若將生產環境的校驗規則同步至測試環境，存在同步不及時和代價大的問題。

發明內容

本發明的目的在于提供一種埋點采集數據校驗的方法及裝置，能夠有效解決測試環境與生產環境中訪問日志校驗規則不統一，校驗結果不準確的問題。

為了實現上述目的，本發明的第一方面提供一種埋點采集數據校驗方法，包括：

統一測試環境和生產環境中埋點采集數據的校驗規則，并配置測試頁面的頁面參數和業務參數；

定時從測試環境中獲取待測頁面的埋點采集數據，和/或，定時從生產環境中獲取待測頁面的埋點采集數據；

基于所述埋點采集數據查找對應測試頁面的頁面參數和業務參數，根據所述校驗規則對所述埋點采集數據進行校驗，輸出校驗結果。

優選地，配置測試頁面的頁面參數和業務參數的方法包括：

在頁面管理系統中配置包括測試頁面基礎信息和埋點參數信息的頁面參數，所述基礎信息至少包括測試頁面的頁面編碼，所述埋點參數信息包括多項埋點測試參數；

在業務管理系統中配置測試頁面的業務參數，所述業務參數包括業務描述信息和校驗規則信息。

較佳地，定時從測試環境中獲取待測頁面的埋點采集數據，和/或，定時從生產環境中獲取待測頁面的埋點采集數據的方法包括：

定時從測試環境和準生產環境獲取訪問日志，所述訪問日志中包括埋點采集數據；和/或，定時從生產環境中獲取離線表，所述離線表中包括埋點采集數據；

所述埋點采集數據中包括待測頁面的基礎信息和埋點參數信息。

優選地，基于所述埋點采集數據查找對應測試頁面的頁面參數和業務參數，根據所述校驗規則對所述埋點采集數據進行校驗，輸出校驗結果的方法包括：

校驗從待測頁面中獲取所述埋點采集數據中的頁面參數是否存在頁面編碼，若不存在則輸出頁面未埋點的校驗結果；

若存在則基于所述頁面編碼從頁面管理系統中匹配出對應測試頁面的埋點參數和業務參數，并將所述埋點采集數據按照所述校驗規則一一對應的與測試頁面中的埋點參數和業務參數比對，根據比對結果輸出校驗結果。

優選地，將所述埋點采集數據按照所述校驗規則一一對應的與測試頁面中的埋點參數和業務參數比對，根據比對結果輸出校驗結果的方法包括：

識別所述埋點采集數據中的埋點項和每個埋點項的對應參數，判斷所述埋點項在對應測試頁面中是否為必要埋點，且埋點項的對應參數是否為固定參數；