[發明專利]日志收集系統及其中的數據傳輸方法和本地服務器

在審

• 申請號: 201410720704.6
• 申請日: 2014-12-02
• 公開（公告）號: CN105721179A
• 公開（公告）日: 2016-06-29
• 發明（設計）人: 洪亮
• 申請（專利權）人: 北京奇虎科技有限公司;奇智軟件（北京）有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;H04L29/06
• 代理公司: 北京市隆安律師事務所 11323
• 代理人: 權鮮枝;何立春

1.一種日志收集系統中的數據傳輸方法，應用于包括客戶端、本地服務器和中心服務器的日志收集系統，該方法包括：

本地服務器接收客戶端從日志源獲取后發送的日志數據；

本地服務器將接收的日志數據進行壓縮后發送給中心服務器，由中心服務器對所接收到的日志數據進行解壓縮后發送至中央存儲系統。

2.如權利要求1所述的方法，其中，

所述本地服務器接收客戶端從日志源獲取后發送的日志數據包括：將接收到的日志數據按照該日志數據的分類放入對應的隊列中；其中，本地服務器有用于存放不同分類的日志數據的多個隊列；

所述本地服務器將接收的日志數據進行壓縮后發送給中心服務器包括：從隊列中取日志數據，對取出的日志數據進行壓縮后發送給中心服務器。

3.如權利要求1或2所述的方法，其中，該方法在本地服務器將接收的日志數據進行壓縮后，并在發送給中心服務器之前，進一步包括：

對壓縮后的日志數據進行base64編碼，然后再發送給中心服務器；

中心服務器對所接收日志數據進行解壓縮之前，先進行base64解碼。

4.如權利要求1或2所述的方法，其中，所述本地服務器將接收的日志數據進行壓縮包括：

采用ZLIB算法或LZO算法對日志數據進行壓縮。

5.如權利要求2所述的方法，其中，

所述將接收到的日志數據按照該日志數據的分類放入對應的隊列中包括：由本地服務器的多個接收工作線程接收客戶端發送的日志數據，并按照該日志數據的分類放入對應的隊列中；

所述從隊列中取日志數據包括：由本地服務器的多個發送工作線程從多個隊列中取日志數據。

6.一種日志收集系統中的本地服務器，包括：接收單元、壓縮單元和發送單元；

所述接收單元，適于接收客戶端從日志源獲取后發送的日志數據；

所述壓縮單元，適于將接收單元接收的日志數據進行壓縮；

所述發送單元，適于將壓縮單元壓縮的日志數據發送給中心服務器，使得中心服務器對所接收到的日志數據進行解壓縮后發送至中央存儲系統。

7.如權利要求6所述的本地服務器，其中，該本地服務器進一步包括：用于存儲多個隊列的存儲單元；

所述接收單元，適于將接收到的日志數據按照該日志數據的分類放入對應的隊列中；

所述壓縮單元，適于從隊列中取日志數據，對取出的日志數據進行壓縮。

8.如權利要求6或7所述的本地服務器，其中，該本地服務器進一步包括：編碼單元，適于對壓縮單元壓縮后的日志數據進行base64編碼；

所述發送單元，適于將編碼單元進行base64編碼后的日志數據發送給中心服務器，使得中心服務器對日志數據進行解壓縮之前，先進行base64解碼。

9.如權利要求6或7所述的本地服務器，其中，

所述壓縮單元，適于采用ZLIB算法或LZO算法對日志數據進行壓縮。

10.一種日志收集系統，其中，該系統包括：客戶端、中心服務器和如權利要求6-9中任一項所述的本地服務器。