[發明專利]一種在線網頁信息的實時監測方法和裝置

在審

• 申請號: 201210369660.8
• 申請日: 2012-09-28
• 公開（公告）號: CN103714057A
• 公開（公告）日: 2014-04-09
• 發明（設計）人: 羅峰;黃蘇支;李娜
• 申請（專利權）人: 北京億贊普網絡技術有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 馬曉亞

1.一種在線網頁信息的實時監測方法，其特征在于，該方法包括：

實時獲取網頁信息日志；

通過滑動時間窗口對所述網頁信息日志中的展示日志數據或者點擊日志數據進行實時統計分析，報告所述展示日志數據或者點擊日志數據的特征異常情況。

2.如權利要求1所述的方法，其特征在于，所述滑動時間窗口以基本時間窗口為單位，由至少兩個等寬連續的所述基本時間窗口組成并且時間寬度固定；

當獲取了一個所述基本時間窗口對應的時間寬度的網頁信息日志后，所述滑動時間窗口移入新的基本時間窗口，并對當前滑動時間窗口對應的所述網頁信息日志進行統計分析。

3.如權利要求1所述的方法，其特征在于，所述對網頁信息日志中的展示日志數據進行實時統計分析，進一步包括：

分別根據所述展示日志數據中的用戶Cookie、IP、IP3、地域、時間統計在線網頁的分布情況，計算在線網頁在上述各維度中的集中度，如果在至少一個維度所述集中度大于第一預設閾值或者小于第二預設閾值，則報告數據異常。

4.如權利要求1所述的方法，其特征在于，所述對網頁信息日志中的展示日志數據進行實時統計分析，進一步包括：

根據所述展示日志數據中的在線投放頁面統計用戶訪問的網頁分布，計算所述用戶訪問網頁的集中度，如果所述集中度大于第一預設閾值或者小于第二預設閾值，則報告數據異常。

5.如權利要求1所述的方法，其特征在于，所述對網頁信息日志中的展示日志數據進行實時統計分析，進一步包括：

統計用戶訪問頁面的來源頁信息，如果來源頁為空的頁面數量大于預設數量，則報告數據異常。

6.如權利要求1所述的方法，其特征在于，所述對網頁信息日志中的點擊日志數據進行實時統計分析，進一步包括：

統計在線網頁的點擊率和點擊位置信息，根據所述點擊位置信息去除無效點擊，根據不同的時間粒度對點擊率進行統計以發現點擊作弊。

7.如權利要求1-6任一所述的方法，其特征在于，實時獲取網頁信息日志后，該方法還包括：

根據所述網頁信息日志中的用戶代理（User?Agent）信息，去除來自網頁爬蟲的訪問量。

8.一種在線網頁信息的實時監測裝置，其特征在于，包括：

獲取模塊，用于實時獲取網頁信息日志；

分析模塊，用于通過滑動時間窗口對所述網頁信息日志中的展示日志數據或者點擊日志數據進行實時統計分析，報告所述展示日志數據或者點擊日志數據的特征異常情況。

9.如權利要求8所述的裝置，其特征在于，所述分析模塊進一步包括：

投放分布統計子模塊，用于分別根據所述展示日志數據中的用戶Cookie、IP、IP3、地域、時間統計在線網頁的分布情況，計算在線網頁在上述各維度中的集中度，如果在至少一個維度所述集中度大于第一預設閾值或者小于第二預設閾值，則報告數據異常。

10.如權利要求9所述的裝置，其特征在于，所述分析模塊進一步包括：

訪問分布統計子模塊，用于根據所述展示日志數據中的在線投放頁面統計用戶訪問的網頁分布，計算所述用戶訪問網頁的集中度，如果所述集中度大于第一預設閾值或者小于第二預設閾值，則報告數據異常。

11.如權利要求10所述的裝置，其特征在于，所述分析模塊進一步包括：

來源頁面統計子模塊，用于統計用戶訪問頁面的來源頁信息，如果來源頁為空的頁面數量大于預設數量，則報告數據異常。

12.如權利要求11所述的裝置，其特征在于，所述分析模塊進一步包括：

點擊信息統計子模塊，用于統計在線網頁的點擊率和點擊位置信息，根據所述點擊位置信息去除無效點擊，根據不同的時間粒度對點擊率進行統計以發現點擊作弊。

13.如權利要求9-12任一所述的裝置，其特征在于，所述裝置進一步包括：

去除模塊，用于根據所述網頁信息日志中的用戶代理（User?Agent）信息，去除來自網頁爬蟲的訪問量。