[發(fā)明專利]一種面向分布式文件系統(tǒng)的日志數(shù)據(jù)組織的方法有效
| 申請(qǐng)?zhí)枺?/td> | 201110328316.X | 申請(qǐng)日: | 2011-10-25 |
| 公開(公告)號(hào): | CN102385624A | 公開(公告)日: | 2012-03-21 |
| 發(fā)明(設(shè)計(jì))人: | 王勇;張東陽;張玉龍;邵宗有;劉新春;苗艷超 | 申請(qǐng)(專利權(quán))人: | 曙光信息產(chǎn)業(yè)(北京)有限公司 |
| 主分類號(hào): | G06F17/30 | 分類號(hào): | G06F17/30 |
| 代理公司: | 北京安博達(dá)知識(shí)產(chǎn)權(quán)代理有限公司 11271 | 代理人: | 徐國(guó)文 |
| 地址: | 100084 *** | 國(guó)省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 面向 分布式 文件系統(tǒng) 日志 數(shù)據(jù) 組織 方法 | ||
1.一種面向分布式文件系統(tǒng)的日志數(shù)據(jù)組織的方法,其特征在于:
在普通文件的某一固定區(qū)域記錄日志數(shù)據(jù)空間的控制信息,所述控制信息包括有效日志數(shù)據(jù)的開始偏移,結(jié)束偏移,最后一條日志記錄的開始偏移,最大可用日志數(shù)據(jù)空間的大小,所述日志記錄中包括本條日志記錄的大小信息,通過日志數(shù)據(jù)空間的控制信息和每條日志記錄的大小信息實(shí)現(xiàn)日志數(shù)據(jù)空間的管理。
2.如權(quán)利要求1所述的方法,其特征在于:所述控制信息將cache日志標(biāo)識(shí)為有效,在cache日志大小達(dá)到一定值后,將內(nèi)存中日志空間控制信息同步到日志設(shè)備;通過修改日志設(shè)備上的控制信息實(shí)現(xiàn)無效日志所占日志空間的回收。
3.如權(quán)利要求2所述的方法,其特征在于:所述無效日志的回收和cache日志同步到日志設(shè)備,可通過內(nèi)存日志空間控制信息實(shí)現(xiàn)聚合,并通過修改cache日志大小的最大值調(diào)整批量日志記錄的聚合程度。
4.如權(quán)利要求2所述的方法,其特征在于:所述cache日志即,日志記錄已經(jīng)同步到日志設(shè)備上,但日志設(shè)備上的控制信息標(biāo)識(shí)這部分日志為無效的日志數(shù)據(jù)。
5.如權(quán)利要求1所述的方法,其特征在于:所述分布式文件系統(tǒng)中記錄的日志種類有:操作日志、副本日志、本地副本日志,本地備份副本日志。
6.如權(quán)利要求5所述的方法,其特征在于:
所述操作日志記錄本元數(shù)據(jù)服務(wù)節(jié)點(diǎn)提供的元數(shù)據(jù)服務(wù)修改;
所述副本日志記錄本元數(shù)據(jù)服務(wù)節(jié)點(diǎn)作為副本處理的元數(shù)據(jù)修改;
所述本地副本日志記錄本元數(shù)據(jù)服務(wù)節(jié)點(diǎn)的副本節(jié)點(diǎn)失效后,副本節(jié)點(diǎn)應(yīng)當(dāng)處理的元數(shù)據(jù)修改;
所述本地備份副本日志作為本地副本日志的備份設(shè)備存在。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于曙光信息產(chǎn)業(yè)(北京)有限公司,未經(jīng)曙光信息產(chǎn)業(yè)(北京)有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201110328316.X/1.html,轉(zhuǎn)載請(qǐng)聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F17-00 特別適用于特定功能的數(shù)字計(jì)算設(shè)備或數(shù)據(jù)處理設(shè)備或數(shù)據(jù)處理方法
G06F17-10 .復(fù)雜數(shù)學(xué)運(yùn)算的
G06F17-20 .處理自然語言數(shù)據(jù)的
G06F17-30 .信息檢索;及其數(shù)據(jù)庫(kù)結(jié)構(gòu)
G06F17-40 .數(shù)據(jù)的獲取和記錄
G06F17-50 .計(jì)算機(jī)輔助設(shè)計(jì)
- 一種基于精簡(jiǎn)策略的集群系統(tǒng)的日志管理優(yōu)化方法
- 日志分離方法及裝置
- 日志服務(wù)器處理日志的方法和裝置
- 一種基于負(fù)載均衡的文件系統(tǒng)日志模型
- 日志生成方法、應(yīng)用服務(wù)器、日志服務(wù)器及日志生成系統(tǒng)
- 一種多線程日志輸出的方法及裝置
- 一種日志分析方法、系統(tǒng)、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)
- 日志解析方法、裝置、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)
- 日志處理方法及設(shè)備
- 一種日志檢測(cè)方法、裝置、終端及服務(wù)器





