[發(fā)明專利]一種基于日志解析的DDL分析方法及裝置在審
| 申請(qǐng)?zhí)枺?/td> | 202011640497.5 | 申請(qǐng)日: | 2020-12-31 |
| 公開(公告)號(hào): | CN112612859A | 公開(公告)日: | 2021-04-06 |
| 發(fā)明(設(shè)計(jì))人: | 崔夢(mèng)華;高志會(huì);周華;江俊 | 申請(qǐng)(專利權(quán))人: | 上海英方軟件股份有限公司 |
| 主分類號(hào): | G06F16/28 | 分類號(hào): | G06F16/28;G06F16/18;G06F16/242 |
| 代理公司: | 上海國(guó)智知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 31274 | 代理人: | 潘建玲 |
| 地址: | 200011 上海市黃*** | 國(guó)省代碼: | 上海;31 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 一種 基于 日志 解析 ddl 分析 方法 裝置 | ||
本發(fā)明公開了一種基于日志解析的DDL分析方法及裝置,所述方法包括如下步驟:步驟S1,連接數(shù)據(jù)庫(kù),從所述數(shù)據(jù)庫(kù)中導(dǎo)出所需系統(tǒng)表的基本信息;步驟S2,讀取重做日志文件redo,從讀取的redo數(shù)據(jù)中分析出DLL事務(wù)及DML詳細(xì)信息,對(duì)比匹配分析DLL事務(wù)中的詳細(xì)信息與步驟S1中導(dǎo)出的所需系統(tǒng)表的基本信息,若出現(xiàn)匹配,則進(jìn)入步驟S3,否則跳過當(dāng)前事務(wù),繼續(xù)讀取分析下一個(gè)事務(wù);步驟S3,解析步驟S2得到的DLL事務(wù),統(tǒng)計(jì)本DLL事務(wù)中對(duì)各個(gè)系統(tǒng)表的DML操作類型及數(shù)量,根據(jù)預(yù)先學(xué)習(xí)確定的DLL事務(wù)的特征確定當(dāng)前DDL事務(wù)的類型;步驟S4,返回步驟S2,直至所述重做日志文件redo讀取完畢。
技術(shù)領(lǐng)域
本發(fā)明涉及計(jì)算機(jī)數(shù)據(jù)庫(kù)技術(shù)領(lǐng)域,特別是涉及一種Oracle數(shù)據(jù)庫(kù)基于日志解析的DDL(Data Definition Language,數(shù)據(jù)定義語(yǔ)言)分析方法及裝置。
背景技術(shù)
Oracle是一種非常流行的關(guān)系數(shù)據(jù)庫(kù),應(yīng)用廣泛,非常受市場(chǎng)歡迎。針對(duì)Oracle的各種研究也很活躍,其中基于在線日志(redo log)解析的數(shù)據(jù)庫(kù)備份、保護(hù)、雙活是一個(gè)重要方向。基于在線日志(redo log)的數(shù)據(jù)庫(kù)備份有各種優(yōu)點(diǎn),例如對(duì)業(yè)務(wù)影響小,對(duì)數(shù)據(jù)庫(kù)依賴低,性能影響小等。為了完整的實(shí)現(xiàn)數(shù)據(jù)庫(kù)保護(hù),從redo中分析DDL是很重要的一環(huán)。但由于DDL在日志中的記錄方式較為復(fù)雜,解析較難且易錯(cuò),因此目前大多產(chǎn)品不支持DDL分析,或者通過在庫(kù)中創(chuàng)建觸發(fā)器(修改了庫(kù))、定期查詢系統(tǒng)表的方式獲取,一般情況下,創(chuàng)建觸發(fā)器、修改源庫(kù)存在無法確定的影響,尤其是創(chuàng)建觸發(fā)器,不但導(dǎo)致數(shù)據(jù)庫(kù)性能下降,還可能導(dǎo)致數(shù)據(jù)錯(cuò)誤,而定期查詢則是一種效率低下、占用大量數(shù)據(jù)庫(kù)IO的方案。
發(fā)明內(nèi)容
為克服上述現(xiàn)有技術(shù)存在的不足,本發(fā)明之目的在于提供一種基于日志解析的DDL分析方法及裝置,以完全基于日志redo分析從而實(shí)現(xiàn)DDL解析的目的。
為達(dá)上述目的,本發(fā)明提出一種基于日志解析的DDL分析方法,包括如下步驟:
步驟S1,連接數(shù)據(jù)庫(kù),從所述數(shù)據(jù)庫(kù)中導(dǎo)出所需系統(tǒng)表的基本信息;
步驟S2,讀取重做日志文件redo,從讀取的redo文件中分析出DLL事務(wù)及DML詳細(xì)信息,對(duì)比匹配分析DLL事務(wù)中的詳細(xì)信息與步驟S1中導(dǎo)出的所需系統(tǒng)表的基本信息,若出現(xiàn)匹配,則進(jìn)入步驟S3,否則跳過當(dāng)前事務(wù),繼續(xù)讀取分析下一個(gè)事務(wù);
步驟S3,解析步驟S2得到的DLL事務(wù),統(tǒng)計(jì)本DLL事務(wù)中對(duì)各系統(tǒng)表的DML操作類型及數(shù)量,根據(jù)預(yù)先學(xué)習(xí)確定的DLL事務(wù)的特征確定當(dāng)前DDL事務(wù)的類型;
步驟S4,返回步驟S2,直至所述重做日志文件redo讀取完畢。
優(yōu)選地,所需系統(tǒng)表包括sys.obj$表、sys.tab$表、sys.col$表、sys.part$表。
優(yōu)選地,于步驟S2中,對(duì)比所述DLL事務(wù)中DML的對(duì)象號(hào)與步驟S1中導(dǎo)出的系統(tǒng)表對(duì)象號(hào),若所述DLL事務(wù)中DML的對(duì)象號(hào)中出現(xiàn)了步驟S1中導(dǎo)出的系統(tǒng)表對(duì)象號(hào),則進(jìn)入步驟S3,若沒有則跳過所述的DLL事務(wù),繼續(xù)讀取redo文件分析并對(duì)比下一個(gè)事務(wù)。
優(yōu)選地,于步驟S2中,若讀取的是在線日志并已讀到最新redo末尾,則等待預(yù)設(shè)時(shí)長(zhǎng)后重新嘗試讀取,如果不是末尾則繼續(xù)分析,從讀到的重做日志文件redo數(shù)據(jù)中分析出DLL事務(wù)及DML詳細(xì)信息。
優(yōu)選地,于步驟S3之前,還包括如下步驟:
步驟S0,運(yùn)行解析過程讀取到在線日志最新位置,保證當(dāng)前庫(kù)中沒有其他事務(wù),執(zhí)行DDL事務(wù),記錄下本事務(wù)的日志中系統(tǒng)表的DML操作類型及數(shù)量,并選取有代表性的系統(tǒng)表及操作類型作為判斷此DDL事務(wù)的特征,多次運(yùn)行上述過程從而得到多個(gè)DLL事務(wù)的特征。
優(yōu)選地,于步驟S0中,進(jìn)一步分析DML操作的具體數(shù)據(jù)內(nèi)容,以此作為判斷DLL事務(wù)的特征。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于上海英方軟件股份有限公司,未經(jīng)上海英方軟件股份有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011640497.5/2.html,轉(zhuǎn)載請(qǐng)聲明來源鉆瓜專利網(wǎng)。
- 一種基于精簡(jiǎn)策略的集群系統(tǒng)的日志管理優(yōu)化方法
- 日志分離方法及裝置
- 日志服務(wù)器處理日志的方法和裝置
- 一種基于負(fù)載均衡的文件系統(tǒng)日志模型
- 日志生成方法、應(yīng)用服務(wù)器、日志服務(wù)器及日志生成系統(tǒng)
- 一種多線程日志輸出的方法及裝置
- 一種日志分析方法、系統(tǒng)、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)
- 日志解析方法、裝置、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)
- 日志處理方法及設(shè)備
- 一種日志檢測(cè)方法、裝置、終端及服務(wù)器
- 用于在過程控制系統(tǒng)中在設(shè)備描述語(yǔ)言之間進(jìn)行轉(zhuǎn)換的設(shè)備和方法
- 元數(shù)據(jù)處理方法及設(shè)備
- 一種數(shù)據(jù)庫(kù)增量日志解析方法及系統(tǒng)
- DDL語(yǔ)句審核方法和裝置
- 數(shù)據(jù)庫(kù)的日志分析處理方法及裝置、DDL同步方法及裝置
- 一種DDL操作的級(jí)聯(lián)同步控制方法及系統(tǒng)
- 針對(duì)V9.7版本DB2數(shù)據(jù)庫(kù)的DDL同步方法及設(shè)備
- 表結(jié)構(gòu)修改方法、裝置、設(shè)備及計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)
- PostgreSQL數(shù)據(jù)庫(kù)的DDL同步方法、裝置、設(shè)備和介質(zhì)
- 一種數(shù)據(jù)庫(kù)DDL管理的方法和裝置





