[發明專利]內容分發網絡的信息處理方法、裝置和系統

在審

• 申請號: 202111154690.2
• 申請日: 2021-09-29
• 公開（公告）號: CN113872814A
• 公開（公告）日: 2021-12-31
• 發明（設計）人: 杜志豪;高亮;李學良;劉萬攀;張宗權;周愛娟
• 申請（專利權）人: 北京金山云網絡技術有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;H04L29/08
• 代理公司: 北京市立方律師事務所 11330
• 代理人: 張筱寧

本申請實施例提供了一種內容分發網絡的信息處理方法、裝置和系統，該方法在子節點有故障發生時，獲取當前子節點的故障信息，根據故障信息，通過采集當前子節點的故障日志以及故障日志前后預定時間范圍內的原始日志，并將采集的故障日志和原始日志存儲在日志存儲系統中，節約了大量的日志采集資源和本地存儲資源；當需要查詢分析故障的時候，響應于數據中心服務器下發的日志獲取任務命令，將存儲的故障日志和原始日志上傳至數據中心服務器，節約了網絡數據上傳帶寬，數據中心服務器的存儲及計算資源，從而極大地節約了日志處理成本。

技術領域

本申請涉及內容分發網絡技術領域，具體而言，本申請涉及一種內容分發網絡(Content Delivery Network，CDN)的信息處理方法、裝置和系統。

背景技術

隨著互聯網的發展，短視頻、直播等流媒體日漸融入大家的生活，對采用CDN來降低網絡擁塞，提高訪問響應速度的需求越來越強烈，CDN產生的日志量呈飛躍式的增加。現有技術中，CDN網絡對于產生的故障，一般會采集所有日志來進行針對故障的排查。然而，CDN服務的可靠性很高，對于故障相關的日志在所有日志中占的比重很小。對所有的日志全量采集、傳輸、存儲、查詢、分析等工作，需要大量占用服務器和網絡成本。隨著業務的不斷擴大，現有的故障日志排查方式所需的硬件成本還會不斷的增加，可能會導致日志服務質量下降，從而出現數據延遲、數據丟失、查詢分析慢等不良現象。

發明內容

本申請實施例的目的旨在能解決如何節約對故障日志查詢分析成本的技術問題。

根據本申請實施例的一個方面，提供了一種CDN的信息處理方法，CDN包括數據中心服務器和與數據中心服務器交互的CDN節點，該方法應用于每個CDN節點，其中，每個CDN節點包括子節點以及日志存儲系統，該方法包括：

當子節點有故障發生時，獲取當前子節點的故障信息；

根據故障信息，采集當前子節點的故障日志以及故障日志前后預定時間范圍內的原始日志；

將采集的故障日志和原始日志存儲在日志存儲系統中，以用于響應于數據中心服務器下發的日志獲取命令，將存儲的故障日志和原始日志上傳至數據中心服務器。

在一種可選的實施方式中，故障信息包括故障時間和故障類型；根據故障信息，采集當前子節點的故障日志以及故障日志前后預定時間范圍內的原始日志，包括：

獲取故障類型對應的故障類型權重；

根據故障時間和故障類型權重，確定預定時間范圍；

基于預定時間范圍，采集當前子節點的故障日志以及故障日志前后預定時間范圍內的原始日志。

在一種可選的實施方式中，響應于數據中心服務器下發的日志獲取命令，將存儲的故障日志和原始日志上傳至數據中心服務器，包括：

響應于數據中心服務器下發的ETL(extract、transform、load，抽取、轉換、加載)任務命令，將存儲的故障日志和原始日志執行ETL任務后上傳至數據中心服務器。

在一種可選的實施方式中，將采集的故障日志和原始日志存儲在日志存儲系統中，包括：

若故障日志包括多個種類的日志，則對故障日志和原始日志進行分類；

將分類后的故障日志和原始日志存儲在日志存儲系統中。

在一種可選的實施方式中，日志存儲系統包括與子節點分別對應的日志存儲子系統；將采集的故障日志和原始日志存儲在日志存儲系統中，包括：

針對每個當前子節點，將采集的該當前子節點的故障日志和原始日志存儲在該當前子節點對應的日志存儲子系統中。