[發明專利]日志文件的數據處理方法和終端設備有效
| 申請號: | 201810514690.0 | 申請日: | 2018-05-25 |
| 公開(公告)號: | CN108829345B | 公開(公告)日: | 2020-02-21 |
| 發明(設計)人: | 臧磊真;薛軍 | 申請(專利權)人: | 華為技術有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06;G06F16/172;G06F16/18 |
| 代理公司: | 廣州三環專利商標代理有限公司 44202 | 代理人: | 郝傳鑫;熊永強 |
| 地址: | 518129 廣東*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 日志 文件 數據處理 方法 終端設備 | ||
1.一種日志文件的數據處理方法,其特征在于,所述日志文件的數據寫入方式為追加式寫入,所述日志文件存儲于目標存儲器中,所述日志文件的文件空間至少包括用于存儲日志數據的數據寫入空間,所述方法包括:
獲取待寫入所述日志文件的第一日志數據;
若所述第一日志數據的大小大于所述日志文件的空閑空間的第一大小,則獲取所述日志文件的空間增長閾值,其中,所述空閑空間為所述數據寫入空間中除已占用空間之外的空間,所述已占用空間為已寫入所述日志文件中的日志數據所占用的空間;
根據所述空間增長閾值對所述日志文件的文件空間進行空間增長以得到第二大小的所述空閑空間,并根據空間增長后的所述日志文件的文件屬性生成所述日志文件的第一元數據;
將所述第一日志數據寫入到所述空閑空間中,以及將所述第一元數據寫入到所述目標存儲器;
若在寫入所述第一日志數據后的所述已占用空間的第三大小小于已占用空間上限值,則當所述第一日志數據寫入到所述空閑空間之后每獲取到待寫入所述日志文件的第二日志數據時,執行下述操作:
若所述第二日志數據的大小小于或等于所述空閑空間的大小,則將所述第二日志數據寫入到所述空閑空間中;
當內核延遲寫回周期到達時,將所述第二日志數據寫入所述日志文件之后生成的所述日志文件的第二元數據寫入到所述目標存儲器中,其中,所述內核延遲寫回周期為周期性地寫回數據到所述目標存儲器的時間間隔;
當內核延遲寫回周期未到達時,不將所述第二元數據寫入到所述目標存儲器中。
2.根據權利要求1所述的方法,其特征在于,所述方法包括:
若所述已占用空間的第三大小等于或大于所述已占用空間上限值,則將所述已占用空間中的數據讀出并更新到主數據庫文件中,將所述日志文件截斷為零長度文件。
3.根據權利要求2所述的方法,其特征在于,所述方法還包括:
若所述第二日志數據的大小大于所述空閑空間的大小,則再次對所述日志文件的文件空間進行空間增長以得到第四大小的所述空閑空間,并根據空間增長后的所述日志文件的文件屬性生成所述日志文件的第三元數據。
4.根據權利要求3所述的方法,其特征在于,所述獲取所述日志文件的空間增長閾值包括:
獲取所述日志文件的數據寫入頻率;
根據所述數據寫入頻率確定出所述日志文件的空間增長閾值。
5.根據權利要求4所述的方法,其特征在于,所述獲取所述日志文件的數據寫入頻率包括:
獲取指定時間間隔內所述日志文件的數據寫入次數,并根據所述指定時間間隔和所述數據寫入次數確定出數據寫入頻率。
6.根據權利要求5所述的方法,其特征在于,所述根據所述數據寫入頻率確定出所述日志文件的空間增長閾值包括:
獲取所述日志文件的數據寫入頻率區間和空間增長閾值區間;
根據所述數據寫入頻率和所述數據寫入頻率區間確定出目標寫入頻率;
確定出所述目標寫入頻率在所述數據寫入頻率區間內的目標位置,并從所述空間增長閾值區間中獲取所述目標位置對應的目標空間閾值;
根據所述目標空間閾值和所述第一日志數據的大小確定出空間增長閾值。
7.根據權利要求1所述的方法,其特征在于,所述獲取所述日志文件的空間增長閾值包括:
獲取所述日志文件的歷史空閑空間增長記錄,其中,所述歷史空閑空間增長記錄中包括空閑空間增長次數N和N次空閑空間增長對應的N個歷史空間增長閾值;
根據所述N個歷史空間增長閾值確定出空間增長閾值。
8.根據權利要求6或7所述的方法,其特征在于,所述根據所述空間增長閾值對所述空閑空間進行空間增長以得到第二大小的空閑空間包括:
為所述日志文件分配與所述空間增長閾值對應大小的源增長空間,并對所述源增長空間進行預處理,以得到處于可寫入狀態的目標增長空間;
將所述第一大小的空閑空間和所述目標增長空間合并為所述第二大小的空閑空間。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于華為技術有限公司,未經華為技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201810514690.0/1.html,轉載請聲明來源鉆瓜專利網。





