[發明專利]一種日志傳輸方法及裝置

有效

• 申請號: 201610182320.2
• 申請日: 2016-03-28
• 公開（公告）號: CN105681472B
• 公開（公告）日: 2019-04-02
• 發明（設計）人: 郝忠秀;陸勇;王崇;任文越
• 申請（專利權）人: 微夢創科網絡科技（中國）有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;H04L12/24
• 代理公司: 北京卓嵐智財知識產權代理事務所(特殊普通合伙) 11624
• 代理人: 任漱晨

1.一種日志傳輸方法，其特征在于，所述方法包括：

監聽并獲取日志數據；所述日志數據包括：不同的網絡協議數據、發生變更的目錄或文件數據；

將監聽獲取到的日志數據依次轉存到數據轉存隊列中；

從所述數據轉存隊列中讀取日志數據，根據包含日志的存儲類型和日志存儲服務器的對應關系的日志類型配置對應表，確定所述日志數據需要存儲的對應的日志存儲服務器，將所述日志數據發送到對應的日志存儲服務器上。

2.如權利要求1所述日志傳輸方法，其特征在于，監聽并獲取所述不同的網絡協議數據具體包括：

監聽并獲取超文本傳輸協議Http數據；

監聽并獲取分布式的高速緩存系統使用的應用層協議Memcache數據；

監聽并獲取公司內部應用層通訊協議Adhead數據。

3.如權利要求2所述日志傳輸方法，其特征在于，監聽并獲取所述不同的網絡協議數據后，所述方法還包括：

對不同的網絡協議數據分別進行網絡協議適配，然后進行網絡協議解析，獲得需要傳輸的日志數據；

將解析出的不同的網絡協議數據對應的需要傳輸的日志數據和所述發生變更的目錄或文件數據，封裝為一個統一的數據格式，然后再依次轉存到所述數據轉存隊列中。

4.如權利要求3所述日志傳輸方法，其特征在于，所述統一的數據格式包括：日志的存儲類型，要轉存的日志數據，用于保證時序一致的哈希身份標識號hashid。

5.一種日志傳輸裝置，其特征在于，所述裝置包括：

日志數據獲取單元，用于監聽并獲取日志數據；所述日志數據獲取單元包括：網絡數據獲取模塊，用于監聽并獲取不同的網絡協議數據；目錄文件數據獲取模塊，用于監聽并獲取發生變更的目錄或文件數據；

數據轉存隊列單元，用于將監聽獲取到的日志數據依次轉存到數據轉存隊列中；

日志存儲適配單元，用于從所述數據轉存隊列中讀取日志數據，根據包含日志的存儲類型和日志存儲服務器的對應關系的日志類型配置對應表，確定所述日志數據需要存儲的對應的日志存儲服務器，將所述日志數據發送到對應的日志存儲服務器上。

6.如權利要求5所述日志傳輸裝置，其特征在于，所述網絡數據獲取模塊，具體用于監聽并獲取超文本傳輸協議Http數據；還具體用于監聽并獲取分布式的高速緩存系統使用的應用層協議Memcache數據；還具體用于監聽并獲取公司內部應用層通訊協議Adhead數據。

7.如權利要求6所述日志傳輸裝置，其特征在于，所述裝置還包括：

網絡協議適配單元，用于所述日志數據獲取單元監聽并獲取不同的網絡協議數據后，對不同的網絡協議數據分別進行網絡協議適配，然后進行網絡協議解析，獲得需要傳輸的日志數據；

統一數據格式封裝單元，用于將解析出的不同的網絡協議數據對應的需要傳輸的日志數據和所述發生變更的目錄或文件數據，封裝為一個統一的數據格式，然后再依次轉存到所述數據轉存隊列中。

8.如權利要求7所述日志傳輸裝置，其特征在于，所述統一的數據格式包括：日志的存儲類型，要轉存的日志數據，用于保證時序一致的hashid。