[發(fā)明專利]日志采集系統(tǒng)、日志采集單元以及日志采集方法

有效

• 申請?zhí)枺?/td>: 201610417661.3
• 申請日: 2016-06-14
• 公開（公告）號: CN107508718B
• 公開（公告）日: 2021-03-02
• 發(fā)明（設(shè)計(jì)）人: 宋軍
• 申請（專利權(quán)）人: 阿里巴巴集團(tuán)控股有限公司
• 主分類號: H04L12/26
• 分類號: H04L12/26;H04L12/24
• 代理公司: 北京清源匯知識產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙) 11644
• 代理人: 馮德魁

1.一種日志采集系統(tǒng)，其特征在于，包括：

采集層設(shè)備，包括一個以上的日志采集單元；其中

每一個所述日志采集單元被預(yù)先配置為與使用主體相關(guān)聯(lián)，并根據(jù)所述使用主體的需求而采集日志數(shù)據(jù)，以及將采集的日志數(shù)據(jù)上傳至存儲層設(shè)備；

所述存儲層設(shè)備，包括一個以上的數(shù)據(jù)存儲單元；其中

每一個所述數(shù)據(jù)存儲單元均與所述日志采集單元相對應(yīng)，并用于存儲所對應(yīng)的日志采集單元上傳的日志數(shù)據(jù)，以及將存儲的日志數(shù)據(jù)提供給所述日志采集單元所關(guān)聯(lián)的使用主體。

2.根據(jù)權(quán)利要求1所述的日志采集系統(tǒng)，其特征在于，所述日志采集系統(tǒng)，部署于云系統(tǒng)上。

3.根據(jù)權(quán)利要求1所述的日志采集系統(tǒng)，其特征在于，所述日志數(shù)據(jù)，包括：云系統(tǒng)的業(yè)務(wù)服務(wù)過程的日志數(shù)據(jù)。

4.根據(jù)權(quán)利要求1所述的日志采集系統(tǒng)，其特征在于，所述采集層設(shè)備，還包括：一個以上的監(jiān)控單元；其中

每一個所述監(jiān)控單元均與所述日志采集單元相對應(yīng)，并由所述日志采集單元觸發(fā)，以及用于：監(jiān)控所述日志采集單元是否已經(jīng)被觸發(fā)；

若否，則觸發(fā)所述日志采集單元。

5.根據(jù)權(quán)利要求4所述的日志采集系統(tǒng)，其特征在于，所述日志采集單元還用于：

監(jiān)控所述監(jiān)控單元是否已經(jīng)被觸發(fā)；

若否，則觸發(fā)所述監(jiān)控單元。

6.根據(jù)權(quán)利要求1所述的日志采集系統(tǒng)，其特征在于，所述數(shù)據(jù)存儲單元，還用于：

通過使用云存儲服務(wù)，將上傳的日志數(shù)據(jù)存儲于所述使用主體的賬號項(xiàng)下。

7.根據(jù)權(quán)利要求2所述的日志采集系統(tǒng)，其特征在于，所述日志采集系統(tǒng)，部署于所述云系統(tǒng)的單臺業(yè)務(wù)服務(wù)器上。

8.根據(jù)權(quán)利要求2所述的日志采集系統(tǒng)，其特征在于，兩個以上的所述日志采集系統(tǒng)，同時部署于所述云系統(tǒng)的同一臺業(yè)務(wù)服務(wù)器上。

9.一種日志采集單元，其特征在于，被預(yù)先配置為與使用主體相關(guān)聯(lián)，包括：日志采集組件，和日志上傳組件；

所述日志采集組件，用于根據(jù)所述使用主體的需求，針對設(shè)置的采集對象，采集所述采集對象的日志數(shù)據(jù)；

所述日志上傳組件，用于上傳所采集的日志數(shù)據(jù)。

10.根據(jù)權(quán)利要求9所述的日志采集單元，其特征在于，還包括：動態(tài)配置組件，和動態(tài)監(jiān)控組件；

所述動態(tài)配置組件，用于將日志文件作為采集對象，并將所述采集對象加入采集對象列表，以及設(shè)置日志監(jiān)控的時間間隔和日志采集的時間間隔；

所述動態(tài)監(jiān)控組件，用于按照所述日志監(jiān)控的時間間隔，定期監(jiān)控所述采集對象列表，并從所述采集對象列表中去除已經(jīng)完成采集的采集對象。

11.根據(jù)權(quán)利要求9所述的日志采集單元，其特征在于，所述日志上傳組件，還用于：

限定最大單次上傳數(shù)據(jù)的大小。

12.根據(jù)權(quán)利要求10所述的日志采集單元，其特征在于，所述日志上傳組件，還用于：

每一次上傳完成之后，均在上傳結(jié)束位置信息列表中更新所上傳的日志數(shù)據(jù)所屬的采集對象的上傳結(jié)束位置；

其中所述上傳結(jié)束位置表示最近一次完成上傳的日志數(shù)據(jù)在所對應(yīng)日志文件中的數(shù)據(jù)結(jié)束位置。

13.根據(jù)權(quán)利要求12所述的日志采集單元，其特征在于，所述日志上傳組件，還用于：

將更新的上傳結(jié)束位置信息列表，存儲于持久化存儲介質(zhì)。

14.根據(jù)權(quán)利要求10所述的日志采集單元，其特征在于，所述日志采集組件，包括：

至少一個日志采集子組件，其中

每一個所述日志采集子組件均與所述采集對象列表中的采集對象相對應(yīng)，用于根據(jù)所述使用主體的需求，按照所述日志采集的時間間隔和所述采集對象是否發(fā)生變化，定期采集日志數(shù)據(jù)。