[發明專利]一種互聯網真實質量監測方法及裝置

有效

• 申請號: 201410383832.6
• 申請日: 2014-08-06
• 公開（公告）號: CN105337753B
• 公開（公告）日: 2019-06-28
• 發明（設計）人: 杭星
• 申請（專利權）人: 中國移動通信集團廣東有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;H04L12/26
• 代理公司: 北京銀龍知識產權代理有限公司 11243
• 代理人: 許靜;黃燦

1.一種互聯網真實質量監測方法，其特征在于，包括如下步驟：

采集經過互聯網出口的全量用戶數據；

將所述全量用戶數據上傳到Apache Hadoop集群架構中的Hadoop分布式文件系統HDFS；

在Apache Hadoop集群構架的Mapreduce計算框架中，采用深度包檢測技術DPI將所述全量用戶數據生成為原始呼叫直接記錄CDR話單；

將所述原始呼叫直接記錄CDR話單合成為重要維度字段話單；

分析所述重要維度字段話單確定互聯網真實質量；其中，所述全量用戶數據指用戶使用網絡時產生的數據流；將所述原始呼叫直接記錄CDR話單合成為重要維度字段話單的步驟包括：

從所述全量用戶數據中提取重要維度字段的數據；

將所述重要維度字段的數據合成業務話單；

所述重要維度字段至少包括連接時長、時延、速率、成功率；

所述連接時長為報文接收時間減去報文開始時間；

所述時延為連接三次握手成功的時間至接收到第一個get報文之間的時間差；

所述速率為單位時間的網絡流量；

所述成功率為根據IP報文返回碼所獲知的識別成功次數占總次數的比例；

所述全量用戶數據包括網絡監控設備發出的流記錄幀Flow Record Frame；所述采集經過互聯網出口的全量用戶數據的步驟具體包括：

通過采集服務器接收網絡監控設備發出的流記錄幀Flow Record Frame；

所述重要維度字段話單包括http業務話單；

采用深度包檢測技術DPI將所述全量用戶數據生成為原始呼叫直接記錄CDR話單的步驟具體包括：

將所述流記錄幀Flow Record Frame和http報文分別轉換為Rawflow文件和http記錄文件；

將所述Rawflow文件和http記錄文件進行精簡和預處理；

將精簡和預處理后的Rawflow文件和http記錄文件上傳到Hadoop集群架構中的Hadoop分布式文件系統HDFS。

2.根據權利要求1所述的方法，其特征在于，采用深度包檢測技術DPI將所述全量用戶數據生成為原始呼叫直接記錄CDR話單之后，還將所述原始呼叫直接記錄CDR話單存儲到分析服務器。

3.根據權利要求1所述的方法，其特征在于，從所述全量用戶數據中提取重要維度字段的數據的步驟包括：

按照協議和訪問類型對于所述全量用戶數據中對應的字段進行識別；

按照預先設定的MapReduce模型中的規律將所述識別后的全量用戶數據分發到Hadoop中的數據分析模塊；

通過所述數據分析模塊從所述識別后的全量用戶數據中提取重要維度字段的話單。

4.根據權利要求3所述的方法，其特征在于，所述數據分析模塊包括Pig數據分析模塊，和/或Hive數據分析模塊。