[發明專利]基于Referer和模板庫匹配的網站質量分析方法、裝置和系統

有效

• 申請號: 201611260470.7
• 申請日: 2016-12-30
• 公開（公告）號: CN108268370B
• 公開（公告）日: 2021-06-15
• 發明（設計）人: 郭天晨;程路;王易風;陳建平;潘梁;范東東
• 申請（專利權）人: 中國移動通信集團浙江有限公司;中國移動通信集團公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06F16/958
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 李相雨

本發明實施例公開了一種基于Referer和模板庫匹配的網站質量分析方法、裝置和系統。所述方法包括：獲取鏈路中的全量流量進行解析，將解析后得到的訪問請求與響應數據進行匹配以得到所有用戶與所有網站的全部會話記錄；利用Referer匹配方法將攜帶Referer字段的會話記錄關聯到對應的網站；利用模板庫匹配方法將未攜帶Referer字段的會話記錄與靜態資源模板庫進行匹配，使上述未攜帶Referer字段的會話記錄全部關聯到對應的網站；在全部會話記錄關聯到網站后對每個網站評分，以供用戶對網站質量分析。本發明實施例利用Referer匹配方法和模板庫匹配方法可將全部會話記錄關聯到網站，從而提高網站會話記錄的完整性和準確性。本發明實施例通過對每個網站進行評分供用戶對網站質量分析。

技術領域

本發明實施例涉及數據業務的網管技術領域，具體涉及一種基于Referer和模板庫匹配的網站質量分析方法、裝置和系統。

背景技術

目前，網站質量分析方案主流技術包括主動撥測技術和被動監測分析。其中，主動撥測分析是通過模擬終端撥測的方式記錄各網站的相關數據，然后將上述數據整理出需要的指標；根據每個網站的指標情況可以得到用戶的主觀感受。被動監測分析是通過采用網絡出口的數據報文進行分析即對網站的報文數據進行分析。

但在實現本發明實施例的過程中，發明人發現：主動撥測分析時部分感知指標不具備普遍性，受到撥測內容和撥測環境影響較大，使得這部分感知指標未能準確反映網站質量，導致分析結果僅能從宏觀上得到一個網站的好和壞而無法為故障定位提供參考數據。

被動監測分析時，由于報文數據是零散的且未直接對應到某個網站，此時只能分析報文數據的統一資源定位符(Uniform Resource Locator，URL)，然后通過Referer(HTTPReferer是header的一部分，當瀏覽器向web服務器發送請求的時候，一般會帶上Referer，告訴服務器該請求是從哪個頁面鏈接過來的，服務器基此可以獲得一些信息用于處理)手段將報文關聯到對應的網站?？梢姳粍颖O測分析僅適用于分析各個元素或者各個服務器IP的相關指標(如時延、成功率等)，而無法對整個網站進行整體感知。

發明內容

本發明實施例的一個目的是解決現有技術由于主動撥測分析無法定位故障或者被動監測分析僅分析各元素而無法對網站進行整體感知的問題。

第一方面，本發明實施例提供了一種基于Referer和模板庫匹配的網站質量分析方法，所述方法包括：

獲取鏈路中的全量流量進行解析，將解析后得到的訪問請求與響應數據進行匹配以得到所有用戶與所有網站的全部會話記錄；

利用Referer匹配方法將攜帶Referer字段的會話記錄關聯到對應的網站；

利用模板庫匹配方法將未攜帶Referer字段的會話記錄與靜態資源模板庫進行匹配，使上述未攜帶Referer字段的會話記錄全部關聯到對應的網站；

在全部會話記錄關聯到網站后對每個網站進行評分，以供用戶對網站質量分析。

可選地，所述利用模板庫匹配方法將未攜帶Referer字段的會話記錄與靜態資源模板庫進行匹配，使上述未攜帶Referer字段的會話記錄全部關聯到對應的網站的步驟之前，包括：

利用模擬瀏覽器定時向每個網站發送訪問請求；

利用網絡抓包方法獲取上述網站的響應數據；

根據訪問請求和相應的響應數據形成每個網站的所有會話記錄并保存至該網站的靜態資源模板庫中。

可選地，所述在全部會話記錄關聯到網站后對每個網站進行評分的步驟包括：

獲取每個網站的所有KQI指標值；

根據每個KQI指標值及其預設權重值計算每個網站的評分；