[發明專利]中央收集服務器、日志文件處理方法及系統

有效

• 申請號: 201510728963.8
• 申請日: 2015-10-30
• 公開（公告）號: CN105429784A
• 公開（公告）日: 2016-03-23
• 發明（設計）人: 唐乾坤;楊寧;顧慶榮
• 申請（專利權）人: 上海帝聯信息科技股份有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 郭學秀;吳敏

技術領域

本發明涉及內容分發網絡技術領域，特別是涉及一種中央收集服務器、日志文件處理方法及系統。

背景技術

隨著互聯網技術的快速發展，手持設備、桌面終端等諸多互聯網終端被大量使用，同時也產生了海量的信息。海量信息背后的“大數據”隱藏著人們自主行為意識，可以產生很多商業行為的潛在價值導向，因而這些海量數據的快速處理和分析技術的需求就日益緊迫。

內容分發網絡(ContentDeliveryNetwork，CDN)服務提供商是通過大量的邊緣節點服務器來為客戶提供加速服務的，而各個邊緣節點服務器產生的日志文件數量是巨大的。但是，現有技術中的中央收集服務器一般僅負責接收各個邊緣節點服務器產生的日志文件，在將接收的日志文件發送至數據中心進行處理。這樣，數據中心需要處理數量巨大的日志文件，存在巨大的數據處理壓力。

發明內容

本發明實施例解決的問題是如何緩解數據中心的日志處理的壓力，提高日志處理的效率。

為解決上述問題，本發明實施例提供了一種日志文件處理方法，所述方法包括：

將邊緣節點服務器發送的日志目錄按照域名進行拆分，生成多個根據域名信息進行命名的日志文件；

當滿足預設的發送條件時，將生成的根據域名信息進行命名的日志文件發送至數據中心。

可選地，所述根據域名信息進行命名的日志文件的名稱包括域名、識別標識、生成時間和日志文件的格式的信息。

可選地，所述預設的發送條件為根據域名信息進行命名的日志文件的緩存時間達到預設的時間閾值。

可選地，所述預設的發送條件為所存儲的根據域名信息進行命名的日志文件的大小達到預設的數量閾值。

本發明實施例還提供了一種中央收集服務器，所述中央收集服務器包括：

日志拆分單元，適于將邊緣節點服務器發送的日志目錄按照域名進行拆分，生成多個根據域名信息進行命名的日志文件；

發送單元，適于當滿足預設的發送條件時，將生成的根據域名信息進行命名的日志文件發送至數據中心。

可選地，所述根據域名信息進行命名的日志文件的名稱包括域名、識別標識、生成時間和日志文件的格式的信息。

可選地，所述預設的發送條件為根據域名信息進行命名的日志文件的緩存時間達到預設的時間閾值。

可選地，所述預設的發送條件為所存儲的根據域名信息進行命名的日志文件的大小達到預設的數量閾值。

本發明實施例還提供了一種日志文件處理系統，所述系統包括上述的中央收集服務器。

與現有技術相比，本發明的技術方案具有以下的優點：

上述的方案，通過將雜糅在一起壓縮日志文件進行拆分，得到多個根據給的域名信息進行命名得到的日志文件，可以減輕數據中心的處理壓力，提升日志文件的處理效率。

附圖說明

圖1是本發明實施例中的一種日志文件處理方法的流程圖；

圖2是本發明實施例中的另一種日志文件處理方法的流程圖；

圖3是本發明實施例中的中央收集服務器的結構示意圖。

具體實施方式

為解決現有技術中存在的上述問題，本發明實施例采用的技術方案通過將雜糅在一起壓縮日志文件進行拆分，得到多個根據給的域名信息進行命名得到的日志文件，可以減輕數據中心的處理壓力，提升日志文件的處理效率。

為使本發明的上述目的、特征和優點能夠更為明顯易懂，下面結合附圖對本發明的具體實施例做詳細的說明。

圖1本發明實施例提供了一種日志文件處理方法的流程圖。如圖1所示，在具體實施中，所述日志文件處理方法可以包括如下的步驟：

步驟S101：將邊緣節點服務器發送的日志目錄按照域名進行拆分，生成多個根據域名信息進行命名的日志文件。

步驟S102：當滿足預設的發送條件時，將生成的根據域名信息進行命名發送至數據中心。

下面將結合圖2對本發明實施例中的日志文件處理方法做進一步詳細的介紹。

請參見圖2所示，在具體實施中，本發明實施例中的一種日志文件處理方法可以包括如下的步驟：

步驟S201：接收邊緣節點服務器發送的日志目錄。

在具體實施中，CDN服務商通過大量的邊緣節點服務器來為客戶提供加速服務。在這種情況下，CDN網絡中的邊緣節點服務器將會產生數量巨大的日志。其中，通過對邊緣節點服務器產生的日志文件進行分析處理，可以獲取到較為全面的用戶的業務信息，以為用戶提供更好的服務。