[發(fā)明專利]一種集群負載均衡系統(tǒng)的日志統(tǒng)計系統(tǒng)及方法

在審

• 申請?zhí)枺?/td>: 201410015535.6
• 申請日: 2014-01-14
• 公開（公告）號: CN103812691A
• 公開（公告）日: 2014-05-21
• 發(fā)明（設(shè)計）人: 戴純興
• 申請（專利權(quán)）人: 浪潮電子信息產(chǎn)業(yè)股份有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術(shù)領(lǐng)域

本發(fā)明涉及一種日志統(tǒng)計技術(shù)領(lǐng)域，特別涉及一種集群負載均衡系統(tǒng)的日志統(tǒng)計系統(tǒng)及方法。?

背景技術(shù)

隨著網(wǎng)絡(luò)技術(shù)的不斷進步，Web網(wǎng)絡(luò)服務(wù)和用戶的數(shù)量正在以爆炸式的增長。以至于Web網(wǎng)站的訪問量和數(shù)據(jù)流量不斷的挑戰(zhàn)服務(wù)器的性能。單一服務(wù)器的處理能力和計算能力在很多情況下無法承受這種挑戰(zhàn)。因此提出了負載均衡的方案，通過負載均衡技術(shù)使得多臺Web服務(wù)器組合成一個有機整體統(tǒng)一對外提供Web服務(wù)，有效的保證了Web網(wǎng)站的穩(wěn)定性和高效性。?

由負載均衡設(shè)備組成的集群也在不斷的融入到這一領(lǐng)域。由于負載均衡設(shè)備產(chǎn)生了大量的日志，在進行顯示、統(tǒng)計及生成報告的過程中也不斷的在挑戰(zhàn)者設(shè)備的性能。多臺負載均衡設(shè)備組成的集群產(chǎn)生的日志及統(tǒng)計結(jié)果如何能夠統(tǒng)一的顯示到客戶端，保證日志的完整性也在不斷的挑戰(zhàn)者系統(tǒng)的性能。?

為了能夠保證負載均衡設(shè)備能夠有效的對外提供服務(wù)和能夠快速的顯示日志、相關(guān)統(tǒng)計數(shù)據(jù)和生成報告。給客戶代理極佳的用戶體驗性。如何能夠極大程度的降低負載均衡設(shè)備的日志存儲、統(tǒng)計和生成報表所占用的系統(tǒng)的性能也是負載均衡設(shè)備的一個研究方向。?

發(fā)明內(nèi)容

為了解決現(xiàn)有技術(shù)的問題，本發(fā)明提供了一種集群負載均衡系統(tǒng)的日志統(tǒng)計系統(tǒng)及方法，其通過相關(guān)模塊組合后，能夠?qū)崿F(xiàn)集群日志及統(tǒng)計結(jié)果的完整性和海量數(shù)據(jù)下快速顯示相關(guān)查詢及統(tǒng)計結(jié)論的功能。?

本發(fā)明所采用的技術(shù)方案如下：?

一種集群負載均衡系統(tǒng)的日志統(tǒng)計系統(tǒng)，包括日志存儲模塊、日志統(tǒng)計模塊、日志顯示模塊和日志傳輸模塊，其中：

日志存儲模塊，用于將負載均衡設(shè)備產(chǎn)生的服務(wù)日志、事件日志、系統(tǒng)日志、管理日志根據(jù)一定的策略記錄到數(shù)據(jù)庫中；

日志統(tǒng)計模塊，用于將相關(guān)日志按照負載均衡設(shè)備當前的配置方式、系統(tǒng)的狀態(tài)，統(tǒng)計出相關(guān)數(shù)據(jù)；

日志顯示模塊，用于根據(jù)用戶的請求，回顯數(shù)據(jù)到客戶端；

日志傳輸模塊，用于將各個負載均衡設(shè)備上的統(tǒng)計相關(guān)結(jié)論傳遞到相關(guān)設(shè)備上，供數(shù)據(jù)顯示模塊使用。

一種集群負載均衡系統(tǒng)的日志統(tǒng)計方法，是采用日志存儲模塊、日志統(tǒng)計模塊、日志顯示模塊和日志傳輸模塊，將負載均衡設(shè)備產(chǎn)生的日志存儲到日志存儲模塊中，日志統(tǒng)計模塊統(tǒng)計出相關(guān)特征數(shù)據(jù)，通過日志傳輸模塊和日志顯示模塊將各個設(shè)備的數(shù)據(jù)統(tǒng)計結(jié)果聯(lián)合顯示。?

采用了日志存儲模塊將數(shù)據(jù)根據(jù)表中數(shù)據(jù)量的大小，進行分表的機制，將達到一定條數(shù)的存儲表格進行備份，并生成新的表格。?

采用了日志統(tǒng)計模塊將各個日志表中的相關(guān)數(shù)據(jù)存儲到不同的統(tǒng)計表中。?

采用了日志傳輸模塊，把不同負載均衡設(shè)備上的數(shù)據(jù)根據(jù)相關(guān)設(shè)置傳輸?shù)揭慌_設(shè)備上。?

采用了日志顯示模塊將用戶要瀏覽的數(shù)據(jù)從本機或者日志傳輸模塊獲取的數(shù)據(jù)顯示到客戶端；或者將用戶要生成報告的數(shù)據(jù)從本機或者日志傳輸模塊獲取的數(shù)據(jù)生成相關(guān)報告。?

采用了報文機制，在搜集數(shù)據(jù)時，能夠同時對負載均衡集群內(nèi)的其它設(shè)備同時進行搜集，并根據(jù)設(shè)置排序接收到的數(shù)據(jù)或者分開處理接收到的數(shù)據(jù)。?

采用了智能設(shè)備狀態(tài)判斷機制，這種機制決定了設(shè)備在每個狀態(tài)下都有一個度量值，決定是否進行統(tǒng)計或者延遲統(tǒng)計時間，度量值由自學習機制，在設(shè)備運行的時間段內(nèi)不斷的對設(shè)備的CPU、內(nèi)存、硬盤、并發(fā)連接數(shù)、新建連接數(shù)和用戶設(shè)置信息加權(quán)后得出。?

本發(fā)明該方法能夠為負載均衡設(shè)備提供日志存儲、日志統(tǒng)計、日志傳輸和日志顯示。整個框架包括日志存儲模塊、日志統(tǒng)計模塊、日志傳輸模塊和日志顯示模塊。?

本發(fā)明的一種集群負載均衡系統(tǒng)的日志統(tǒng)計系統(tǒng)及方法具有以下特征：?

1、通過該方法實現(xiàn)的日志系統(tǒng)能夠為單獨的負載均衡設(shè)備提供日志的存儲、統(tǒng)計、顯示。也能夠為由負載均衡設(shè)備組成的集群提供日志的存儲、統(tǒng)計、傳輸和顯示。實現(xiàn)了日志顯示的完整性及報表生成的完整性。

2、單臺設(shè)備的時候，日志傳輸模塊將不啟用。在進行日志顯示的時候只查詢本地的日志數(shù)據(jù)庫的日志內(nèi)容和由日志統(tǒng)計模塊所產(chǎn)生的統(tǒng)計數(shù)據(jù)。日志報表生成也只是根據(jù)本地數(shù)據(jù)庫的相關(guān)數(shù)據(jù)生成。?

3、多臺設(shè)備的時候，日志傳輸模塊將啟用。日志模塊是否搜集其它設(shè)備的日志或者統(tǒng)計數(shù)據(jù)將根據(jù)當前用戶的設(shè)置進行。日志在顯示的時候?qū)⒏鶕?jù)配置情況將本地數(shù)據(jù)庫和其它設(shè)備上的數(shù)據(jù)庫中的日志和統(tǒng)計數(shù)據(jù)根據(jù)一定規(guī)則組合顯示或者分開顯示。日志報表生成也將根據(jù)用戶設(shè)置的相關(guān)規(guī)則搜集集群內(nèi)的相關(guān)數(shù)據(jù)生成報表。?