[發(fā)明專利]一種日志處理方法及系統(tǒng)有效
| 申請?zhí)枺?/td> | 201710560367.2 | 申請日: | 2017-07-11 |
| 公開(公告)號: | CN107544888B | 公開(公告)日: | 2020-09-08 |
| 發(fā)明(設(shè)計)人: | 張闖 | 申請(專利權(quán))人: | 新華三技術(shù)有限公司 |
| 主分類號: | G06F11/30 | 分類號: | G06F11/30;G06F11/34 |
| 代理公司: | 北京博思佳知識產(chǎn)權(quán)代理有限公司 11415 | 代理人: | 陳蕾 |
| 地址: | 310052 浙*** | 國省代碼: | 浙江;33 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 日志 處理 方法 系統(tǒng) | ||
1.一種日志處理方法,應(yīng)用于日志處理系統(tǒng)中的控制模塊,其特征在于,所述方法包括:
確定緩存隊列的緩存比例,所述緩存比例為緩存隊列中緩存的日志的數(shù)量占該緩存隊列允許緩存的日志的最大數(shù)量的比例,所述日志被所述日志處理系統(tǒng)中的容器從所述緩存隊列中拉取并處理;
當(dāng)所述緩存比例滿足容器啟動條件時,通知所述日志處理系統(tǒng)中的容器管理模塊啟動新的容器參與日志處理。
2.如權(quán)利要求1所述的方法,其特征在于,所述當(dāng)所述緩存比例滿足容器啟動條件時,通知所述日志處理系統(tǒng)中的容器管理模塊啟動新的容器參與日志處理,包括:
當(dāng)所述緩存比例大于預(yù)設(shè)的比例閾值時,通知所述容器管理模塊啟動新的容器參與日志處理。
3.如權(quán)利要求2所述的方法,其特征在于,所述當(dāng)所述緩存比例大于預(yù)設(shè)的比例閾值時,通知所述容器管理模塊啟動新的容器參與日志處理,包括:
統(tǒng)計緩存比例持續(xù)大于預(yù)設(shè)的比例閾值的第一時長;當(dāng)統(tǒng)計的第一時長大于預(yù)設(shè)的第一時長閾值時,通知所述容器管理模塊啟動新的容器參與日志處理;
或者,
統(tǒng)計緩存比例連續(xù)大于預(yù)設(shè)的比例閾值的第一次數(shù);當(dāng)統(tǒng)計的第一次數(shù)大于預(yù)設(shè)的第一次數(shù)閾值時,通知所述容器管理模塊啟動新的容器參與日志處理。
4.如權(quán)利要求1所述的方法,其特征在于,所述當(dāng)所述緩存比例滿足容器啟動條件時,通知所述日志處理系統(tǒng)中的容器管理模塊啟動新的容器參與日志處理,包括:
統(tǒng)計緩存比例持續(xù)增長的第二時長;當(dāng)所述第二時長大于預(yù)設(shè)的第二時長閾值時,通知所述容器管理模塊啟動新的容器參與日志處理;
或者,
統(tǒng)計緩存比例連續(xù)增長的第二次數(shù);當(dāng)所述第二次數(shù)大于預(yù)設(shè)的第二次數(shù)閾值時,通知所述容器管理模塊啟動新的容器參與日志處理。
5.如權(quán)利要求1至4任一所述的方法,其特征在于,所述方法還包括:
在預(yù)設(shè)的第三時長內(nèi)統(tǒng)計所述緩存隊列為空的第三次數(shù);
當(dāng)所述第三次數(shù)大于預(yù)設(shè)的第三次數(shù)閾值時,通知所述容器管理模塊按照預(yù)設(shè)的關(guān)閉比例關(guān)閉處于空閑狀態(tài)的容器,以使所述容器管理模塊根據(jù)所述預(yù)設(shè)的關(guān)閉比例計算待關(guān)閉的容器的數(shù)量并取整后,按照取整后的數(shù)量關(guān)閉處于空閑狀態(tài)的容器。
6.一種日志處理系統(tǒng),其特征在于,所述系統(tǒng)包括:
控制模塊,用于確定緩存隊列的緩存比例,所述緩存比例為緩存隊列中緩存的日志的數(shù)量占該緩存隊列允許緩存的日志的最大數(shù)量的比例,所述日志被所述日志處理系統(tǒng)中的容器從所述緩存隊列中拉取并處理,當(dāng)所述緩存比例滿足容器啟動條件時,通知容器管理模塊啟動新的容器參與日志處理;
所述容器管理模塊,用于在接收到所述控制模塊發(fā)送的啟動容器的通知后,啟動新的容器。
7.如權(quán)利要求6所述的系統(tǒng),其特征在于,所述控制模塊當(dāng)所述緩存比例滿足容器啟動條件時,通知容器管理模塊啟動新的容器參與日志處理,包括:
當(dāng)所述緩存比例大于預(yù)設(shè)的比例閾值時,通知所述容器管理模塊啟動新的容器參與日志處理。
8.如權(quán)利要求7所述的系統(tǒng),其特征在于,所述控制模塊當(dāng)所述緩存比例大于預(yù)設(shè)的比例閾值時,通知所述容器管理模塊啟動新的容器參與日志處理,包括:
統(tǒng)計緩存比例持續(xù)大于預(yù)設(shè)的比例閾值的第一時長;當(dāng)統(tǒng)計的第一時長大于預(yù)設(shè)的第一時長閾值時,通知所述容器管理模塊啟動新的容器參與日志處理;
或者,統(tǒng)計緩存比例連續(xù)大于預(yù)設(shè)的比例閾值的第一次數(shù);當(dāng)統(tǒng)計的第一次數(shù)大于預(yù)設(shè)的第一次數(shù)閾值時,通知所述容器管理模塊啟動新的容器參與日志處理。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于新華三技術(shù)有限公司,未經(jīng)新華三技術(shù)有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710560367.2/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。





