[發(fā)明專利]一種集群存儲系統(tǒng)的日志管理優(yōu)化方法

無效

• 申請?zhí)枺?/td>: 201110225813.7
• 申請日: 2011-08-08
• 公開（公告）號: CN102411533A
• 公開（公告）日: 2012-04-11
• 發(fā)明（設(shè)計）人: 侯志敏
• 申請（專利權(quán)）人: 浪潮電子信息產(chǎn)業(yè)股份有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.１、一種集群存儲系統(tǒng)的日志管理優(yōu)化方法，其特征在于，通過將各個節(jié)點的日志采用實時兩種方式發(fā)送到日志服務(wù)器上進(jìn)行集中管理和分析，根據(jù)分析結(jié)果存儲日志文件，建立壓縮策略，并利用數(shù)據(jù)庫為日志建立日志索引表，最后通過日志查看策略將各模塊的日志查詢結(jié)果展示給用戶，包括：日志集中策略模塊、日志分析策略模塊、日志存儲策略模塊和日志顯示策略模塊，其中：

日志集中策略模塊：是把集群節(jié)點的日志發(fā)送到日志服務(wù)器上進(jìn)行集中管理，該模塊發(fā)送日志時沿用傳統(tǒng)方法，集群節(jié)點實時地將系統(tǒng)日志發(fā)送到日志服務(wù)器，日志服務(wù)器接受日志，并對接受的日志進(jìn)行日志分析處理；

日志分析策略模塊：是將集群節(jié)點的日志進(jìn)行分析處理，根據(jù)設(shè)定的應(yīng)用模塊包括：文件系統(tǒng)，高可用，監(jiān)控，網(wǎng)絡(luò)，標(biāo)識進(jìn)行過濾處理，使日志分類存儲；對集群節(jié)點相同的日志進(jìn)行過濾，以防止相同日志信息占用日志空間；提取日志時間，節(jié)點信息，方便日志存儲和索引；

日志存儲策略模塊：分為日志文件存儲和日志記錄數(shù)據(jù)庫存儲，日志文件存儲是在集群日志服務(wù)中分類存儲各集群節(jié)點日志文件，日志記錄數(shù)據(jù)庫存儲是將日志分析策略得到的各分類日志以時間和節(jié)點名為索引，引用日志存儲文件，建立日志索引表，以方便用戶查看；日志存儲策略模塊還對日志進(jìn)行壓縮，以減少日志文件占用空間；日志文件有效期是有限的，過期日志不需要保存，故對過期日志文件輪詢刪除；

日志查看策略模塊：是在web系統(tǒng)上設(shè)置日志查看器，查看器按日志類型進(jìn)行分類查看，對應(yīng)數(shù)據(jù)庫中的日志索引表，并根據(jù)索引表中日志url引用，獲得實時的日志信息，從而實現(xiàn)對日志信息的分類與匯總，用戶選擇相應(yīng)的時間，日志類型，就能查看集群某應(yīng)用模塊所有集群節(jié)點的日志信息。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，日志集中策略模塊在日志發(fā)送前，集群存儲各節(jié)點日志寫入時根據(jù)應(yīng)用類型添加應(yīng)用標(biāo)識；集群節(jié)點實時向日志服務(wù)器發(fā)送日志，日志服務(wù)器接受日志。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于日志分析策略模塊，對各集群節(jié)點系統(tǒng)日志按照應(yīng)用模塊進(jìn)行分析處理，對重復(fù)日志過濾處理，通過日志分析，根據(jù)日志生成的時間與節(jié)點名進(jìn)行排序。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于日志存儲策略模塊，將集群系統(tǒng)日志文件分類存儲，并對日志文件進(jìn)行整合；整合分類結(jié)果，將日志按照時間與節(jié)點名作為索引對日志文件匯總，建立對日志文件的引用；制定合理的日志壓縮策略，對超過限界的日志進(jìn)行壓縮處理；對過期的日志設(shè)置刪除的策略。

5.根據(jù)權(quán)利要求4?所屬的方法，其特征在于日志查看策略模塊，建立web系統(tǒng)訪問頁面與數(shù)據(jù)庫索引表的關(guān)系，通過日志索引表查看后端日志文件；web界面按照系統(tǒng)應(yīng)用模塊進(jìn)行分類查詢。