[發(fā)明專利]一種分布式部署的系統(tǒng)和方法

有效

• 申請?zhí)枺?/td>: 201711322472.9
• 申請日: 2017-12-12
• 公開（公告）號(hào): CN108052358B
• 公開（公告）日: 2021-07-13
• 發(fā)明（設(shè)計(jì)）人: 蔡曉華;袁紹桃;趙澤;楊光輝;賀曉麟;王濤;胡倩倩
• 申請（專利權(quán)）人: 上海天旦網(wǎng)絡(luò)科技發(fā)展有限公司
• 主分類號(hào): G06F8/61
• 分類號(hào): G06F8/61
• 代理公司: 上海漢聲知識(shí)產(chǎn)權(quán)代理有限公司 31236
• 代理人: 莊文莉

1.一種分布式部署的方法，其特征在于，包括：

數(shù)據(jù)采集步驟：實(shí)時(shí)監(jiān)聽偵測并持續(xù)采集當(dāng)前服務(wù)器的數(shù)據(jù)鏈路中的數(shù)據(jù)包信息；

數(shù)據(jù)處理步驟：將采集到的數(shù)據(jù)包信息解析成交易原始記錄，計(jì)算出交易關(guān)聯(lián)字段，根據(jù)交易關(guān)聯(lián)字段派發(fā)交易記錄，關(guān)聯(lián)派發(fā)的交易記錄為交易關(guān)聯(lián)記錄，合成交易關(guān)聯(lián)記錄得到交易數(shù)據(jù)并將交易數(shù)據(jù)存儲(chǔ)到當(dāng)前服務(wù)器的文件存儲(chǔ)模塊中，聚合交易數(shù)據(jù)，將聚合后的交易數(shù)據(jù)存儲(chǔ)至當(dāng)前服務(wù)器的數(shù)據(jù)庫；

數(shù)據(jù)展現(xiàn)步驟：主機(jī)服務(wù)器讀取所需的數(shù)據(jù)庫、文件存儲(chǔ)模塊中的數(shù)據(jù)并呈現(xiàn)；

所述數(shù)據(jù)展現(xiàn)步驟包括：

步驟1、通過只存在于主機(jī)服務(wù)器上的頁面主進(jìn)程在頁面上做操作時(shí)接受前臺(tái)頁面請求，將前臺(tái)操作任務(wù)發(fā)給相關(guān)進(jìn)程執(zhí)行，同時(shí)該頁面主進(jìn)程還承擔(dān)整個(gè)系統(tǒng)記錄信息的任務(wù)；

步驟2、通過主從機(jī)服務(wù)器都有的頁面進(jìn)程接收步驟1中頁面主進(jìn)程分發(fā)下來的當(dāng)前服務(wù)器的任務(wù)并下發(fā)到對應(yīng)的中間件；

步驟3、通過主從機(jī)服務(wù)器頁面進(jìn)程都有的相關(guān)的turobject中間件實(shí)現(xiàn)跨服務(wù)器統(tǒng)計(jì)的分解，派發(fā)與合并，跨路徑圖捕獲點(diǎn)統(tǒng)計(jì)的分解與合并；通過交易關(guān)鍵字查詢，結(jié)合文件存儲(chǔ)模塊中的內(nèi)容，在頁面上呈現(xiàn)具體的交易記錄信息；以及，通過自定義的時(shí)間、服務(wù)器、站點(diǎn)以及維度查詢數(shù)據(jù)庫，在頁面上呈現(xiàn)各個(gè)維度組合下的指標(biāo)信息；

文件存儲(chǔ)模塊中存儲(chǔ)的所述交易數(shù)據(jù)包括數(shù)據(jù)包、交易原始記錄以及交易關(guān)聯(lián)記錄；

文件存儲(chǔ)模塊中存儲(chǔ)的所述交易數(shù)據(jù)根據(jù)來源和時(shí)間分多級(jí)目錄；

數(shù)據(jù)庫中存儲(chǔ)的聚合后的交易數(shù)據(jù)根據(jù)路徑圖和月份分庫、根據(jù)捕獲點(diǎn)分表以及根據(jù)聚合程度分表，聚合程度包括捕獲點(diǎn)、服務(wù)器IP、站點(diǎn)以及維度；

數(shù)據(jù)展現(xiàn)步驟還包括：

交易記錄呈現(xiàn)步驟：通過所述交易關(guān)聯(lián)字段并結(jié)合文件存儲(chǔ)中的數(shù)據(jù)，呈現(xiàn)交易記錄信息。

2.一種分布式部署的系統(tǒng)，其特征在于，包括一臺(tái)主機(jī)服務(wù)器以及至少一臺(tái)從機(jī)服務(wù)器，所述主機(jī)服務(wù)器與所述從機(jī)服務(wù)器均包括：

數(shù)據(jù)采集模塊：實(shí)時(shí)監(jiān)聽偵測并持續(xù)采集當(dāng)前服務(wù)器的數(shù)據(jù)鏈路中的數(shù)據(jù)包信息；

數(shù)據(jù)處理模塊：將采集到的數(shù)據(jù)包信息解析成交易原始記錄，計(jì)算出交易關(guān)聯(lián)字段，根據(jù)交易關(guān)聯(lián)字段派發(fā)交易記錄，關(guān)聯(lián)派發(fā)的交易記錄為交易關(guān)聯(lián)記錄，合成交易關(guān)聯(lián)記錄得到交易數(shù)據(jù)并將交易數(shù)據(jù)存儲(chǔ)到當(dāng)前服務(wù)器的文件存儲(chǔ)模塊中，聚合交易數(shù)據(jù)，將聚合后的交易數(shù)據(jù)存儲(chǔ)至當(dāng)前服務(wù)器的數(shù)據(jù)庫；

所述主機(jī)服務(wù)器還包括數(shù)據(jù)展現(xiàn)模塊；

數(shù)據(jù)展現(xiàn)模塊：讀取所需的數(shù)據(jù)庫、文件存儲(chǔ)模塊中的數(shù)據(jù)并呈現(xiàn)；

所述數(shù)據(jù)展現(xiàn)模塊執(zhí)行包括：

步驟1、通過只存在于主機(jī)服務(wù)器上的頁面主進(jìn)程在頁面上做操作時(shí)接受前臺(tái)頁面請求，將前臺(tái)操作任務(wù)發(fā)給相關(guān)進(jìn)程執(zhí)行，同時(shí)該頁面主進(jìn)程還承擔(dān)整個(gè)系統(tǒng)記錄信息的任務(wù)；

步驟2、通過主從機(jī)服務(wù)器都有的頁面進(jìn)程接收步驟1中頁面主進(jìn)程分發(fā)下來的當(dāng)前服務(wù)器的任務(wù)并下發(fā)到對應(yīng)的中間件；

步驟3、通過主從機(jī)服務(wù)器頁面進(jìn)程都有的相關(guān)的turobject中間件實(shí)現(xiàn)跨服務(wù)器統(tǒng)計(jì)的分解，派發(fā)與合并，跨路徑圖捕獲點(diǎn)統(tǒng)計(jì)的分解與合并；通過交易關(guān)鍵字查詢，結(jié)合文件存儲(chǔ)模塊中的內(nèi)容，在頁面上呈現(xiàn)具體的交易記錄信息；以及，通過自定義的時(shí)間、服務(wù)器、站點(diǎn)以及維度查詢數(shù)據(jù)庫，在頁面上呈現(xiàn)各個(gè)維度組合下的指標(biāo)信息；

文件存儲(chǔ)模塊中存儲(chǔ)的所述交易數(shù)據(jù)包括數(shù)據(jù)包、交易原始記錄以及交易關(guān)聯(lián)記錄；

文件存儲(chǔ)模塊中存儲(chǔ)的所述交易數(shù)據(jù)根據(jù)來源和時(shí)間分多級(jí)目錄；

數(shù)據(jù)庫中存儲(chǔ)的聚合后的交易數(shù)據(jù)根據(jù)路徑圖和月份分庫、根據(jù)捕獲點(diǎn)分表以及根據(jù)聚合程度分表，聚合程度包括捕獲點(diǎn)、服務(wù)器IP、站點(diǎn)以及維度；

數(shù)據(jù)展現(xiàn)模塊包括：

交易記錄呈現(xiàn)子模塊：通過所述交易關(guān)聯(lián)字段并結(jié)合文件存儲(chǔ)中的數(shù)據(jù)，呈現(xiàn)交易記錄信息。