[發(fā)明專利]一種對(duì)DB2數(shù)據(jù)庫(kù)建表日志列名解析的方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 202110109747.0
• 申請(qǐng)日: 2021-01-27
• 公開（公告）號(hào): CN112765180B
• 公開（公告）日: 2023-01-17
• 發(fā)明（設(shè)計(jì)）人: 藍(lán)炳雄;高志會(huì);胡軍擎;江俊
• 申請(qǐng)（專利權(quán)）人: 上海英方軟件股份有限公司
• 主分類號(hào): G06F16/22
• 分類號(hào): G06F16/22;G06F16/242
• 代理公司: 上海國(guó)智知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 31274
• 代理人: 潘建玲

本發(fā)明公開了一種對(duì)DB2數(shù)據(jù)庫(kù)建表日志列名解析的方法及裝置，該方法包括：步驟S1，在解析建表日志時(shí)，對(duì)原始SQL日志進(jìn)行解析，從SQL語(yǔ)句中分離出表名和schema名，并存入用于表示表基本信息的一解析結(jié)構(gòu)體中；步驟S2，對(duì)初始化表的日志，從中獲取表ID、表空間ID以及表的各列屬性信息，存入解析結(jié)構(gòu)體中，并構(gòu)建一個(gè)任務(wù)結(jié)構(gòu)體，于任務(wù)結(jié)構(gòu)體設(shè)置一個(gè)建表操作的標(biāo)志數(shù)，將獲取到的表ID、表空間ID存任務(wù)結(jié)構(gòu)體中；步驟S3，按照任務(wù)隊(duì)列的順序讀取任務(wù)結(jié)構(gòu)體，根據(jù)所述任務(wù)結(jié)構(gòu)體、解析結(jié)構(gòu)體及數(shù)據(jù)庫(kù)系統(tǒng)表獲取表名、schema名、列名、列屬性信息拼裝成JSON格式的SQL操作基本信息發(fā)送到KAFKA。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)數(shù)據(jù)備份容災(zāi)技術(shù)領(lǐng)域，特別是涉及一種對(duì)DB2數(shù)據(jù)庫(kù)建表日志列名解析的方法及裝置。

背景技術(shù)

DB2為IBM開發(fā)的一種大型關(guān)系型數(shù)據(jù)庫(kù)平臺(tái)，它支持多用戶或應(yīng)用程序在同一條SQL語(yǔ)句中查詢不同database甚至不同DBMS中的數(shù)據(jù)，是目前使用最廣泛的關(guān)系數(shù)據(jù)庫(kù)系統(tǒng)之一。

目前，DB2數(shù)據(jù)庫(kù)在解析Create Table(建表)日志時(shí)會(huì)依次產(chǎn)生三種類型的日志數(shù)據(jù)：一種是Component identifier為11、Function identifier為4的原始SQL日志記錄，需要設(shè)置數(shù)據(jù)庫(kù)屬性LOG_DDL_STMTS為YES；一種是Component identifier為4、Functionidentifier為101的建表日志記錄；還有一種是Component identifier為1、Functionidentifier為128的初始化表的日志記錄，要求在建表或修改表時(shí)聲明data capturechanges屬性，其中，原始SQL日志記錄包括輸入SQL的原文，建表日志的數(shù)據(jù)均為數(shù)據(jù)庫(kù)內(nèi)部使用，初始化表日志中主要包含表的列屬性與列的個(gè)數(shù)等。

在實(shí)時(shí)解析Create Table(建表)操作時(shí)，需獲取到表名與表結(jié)構(gòu)，其中表結(jié)構(gòu)主要包括列名與列屬性，可以從原始SQL日志記錄分析中獲取表名、在初始化表日志中可獲取到列屬性但沒有列名，而在解析完畢將JSON格式的新建表的基本信息發(fā)送至KAFKA時(shí)，需要發(fā)送表名、schema名、列名、列屬性等信息。

為解決上述問題，目前直接方法一般采取從原始SQL日志中直接解析SQL語(yǔ)句，按照Create Table(建表)的語(yǔ)法或其他特征來(lái)分解SQL語(yǔ)句的各個(gè)單詞，從而獲取列名。但是，以SQL語(yǔ)法來(lái)解析Create Table(建表)語(yǔ)句中的各類信息，基本等同于實(shí)現(xiàn)一個(gè)用于解析Create Table(建表)語(yǔ)句的編譯器，這樣雖然能保證程序完善，但對(duì)開發(fā)人員的技術(shù)水平要求較高，實(shí)現(xiàn)起來(lái)過(guò)于復(fù)雜、費(fèi)時(shí)；用SQL語(yǔ)句里的其他特征(如空格、逗號(hào)和左右括號(hào)等)以字符串匹配的方式來(lái)解析Create Table(建表)語(yǔ)句中的各類信息，雖然實(shí)現(xiàn)起來(lái)較為簡(jiǎn)單，但是難以覆蓋使用Create Table(建表)操作的各種情形，可能導(dǎo)致Create Table(建表)操作解析失敗甚至程序崩潰。

發(fā)明內(nèi)容

為克服上述現(xiàn)有技術(shù)存在的不足，本發(fā)明之目的在于提供一種對(duì)DB2數(shù)據(jù)庫(kù)建表日志列名解析的方法及裝置，以實(shí)現(xiàn)在Create table(建表)日志解析中獲取列名的目的。

為達(dá)上述目的，本發(fā)明提出一種對(duì)DB2數(shù)據(jù)庫(kù)建表日志列名解析的方法，包括如下步驟：

步驟S1，在解析建表日志時(shí)，對(duì)原始SQL日志進(jìn)行解析，從SQL語(yǔ)句中分離出表名和schema名，并存入用于表示表基本信息的一解析結(jié)構(gòu)體中；

步驟S2，對(duì)初始化表的日志，從中獲取表ID、表空間ID以及表的各列屬性信息，存入所述解析結(jié)構(gòu)體中，并構(gòu)建一個(gè)任務(wù)結(jié)構(gòu)體，于所述任務(wù)結(jié)構(gòu)體設(shè)置一個(gè)建表操作的標(biāo)志數(shù)，將獲取到的表ID、表空間ID存所述任務(wù)結(jié)構(gòu)體中；