[發(fā)明專利]一種結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的寬表生成方法及其裝置

有效

• 申請?zhí)枺?/td>: 201611161287.1
• 申請日: 2016-12-15
• 公開（公告）號: CN108228628B
• 公開（公告）日: 2020-11-17
• 發(fā)明（設(shè)計(jì)）人: 應(yīng)文亮
• 申請（專利權(quán)）人: 億度慧達(dá)教育科技（北京）有限公司
• 主分類號: G06F16/23
• 分類號: G06F16/23;G06F16/242;G06F16/2453;G06F16/22
• 代理公司: 北京合智同創(chuàng)知識產(chǎn)權(quán)代理有限公司 11545
• 代理人: 李杰

1.一種結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的寬表生成方法，其特征在于，包括：

獲取所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的日志文件，并通過所述日志文件獲得所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的變更數(shù)據(jù)；

根據(jù)所述變更數(shù)據(jù)獲得所述日志文件對應(yīng)的關(guān)聯(lián)表的關(guān)聯(lián)關(guān)系以及數(shù)據(jù)的待執(zhí)行操作，執(zhí)行所述數(shù)據(jù)的轉(zhuǎn)換操作；

接收數(shù)據(jù)轉(zhuǎn)換操作完成的轉(zhuǎn)換后數(shù)據(jù)，將所述轉(zhuǎn)換后數(shù)據(jù)載入到目標(biāo)數(shù)據(jù)庫的寬表中；

其中，所述根據(jù)所述變更數(shù)據(jù)獲得所述日志文件對應(yīng)的關(guān)聯(lián)表的關(guān)聯(lián)關(guān)系以及數(shù)據(jù)的待執(zhí)行操作，執(zhí)行數(shù)據(jù)轉(zhuǎn)換操作包括：

根據(jù)所述變更數(shù)據(jù)獲得所述日志文件對應(yīng)的關(guān)聯(lián)表，并判斷所述關(guān)聯(lián)表中的數(shù)據(jù)是否為主表數(shù)據(jù)；

如果所述數(shù)據(jù)為主表數(shù)據(jù)，且所述數(shù)據(jù)的待執(zhí)行操作為插入操作，根據(jù)關(guān)聯(lián)表的關(guān)聯(lián)關(guān)系，生成關(guān)聯(lián)查詢語句，查詢所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫，并將查詢到的數(shù)據(jù)轉(zhuǎn)換為目標(biāo)庫的事件數(shù)據(jù)對象；

如果所述數(shù)據(jù)為主表數(shù)據(jù)，且所述數(shù)據(jù)的待執(zhí)行操作為刪除操作或者更新操作，直接將所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的事件數(shù)據(jù)對象轉(zhuǎn)換為目標(biāo)庫的事件數(shù)據(jù)對象。

2.如權(quán)利要求1所述的方法，其特征在于，所述獲取所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的日志文件，并通過所述日志文件獲得所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的變更數(shù)據(jù)包括：

通過模擬的從庫與所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫所建立的連接，獲取所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的日志文件的位置信息；

根據(jù)所述位置信息，向所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫發(fā)送備份命令，獲得所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫推送的日志文件；

解析所述日志文件，按照所述日志文件的格式獲取所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的變更數(shù)據(jù)。

3.如權(quán)利要求2所述的方法，其特征在于，所述獲取所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的日志文件，并通過所述日志文件獲得所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的變更數(shù)據(jù)還包括：

更新并保存所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的當(dāng)前日志文件的位置信息。

4.如權(quán)利要求1所述方法，其特征在于，所述根據(jù)所述變更數(shù)據(jù)獲得所述日志文件對應(yīng)的關(guān)聯(lián)表的關(guān)聯(lián)關(guān)系以及數(shù)據(jù)的待執(zhí)行操作，執(zhí)行數(shù)據(jù)轉(zhuǎn)換操作包括：

如果所述數(shù)據(jù)為從表數(shù)據(jù)，且所述待執(zhí)行操作為插入操作，將插入操作轉(zhuǎn)為對寬表更新操作；

如果所述數(shù)據(jù)為從表數(shù)據(jù)，且所述待執(zhí)行操作為刪除操作或者更新操作，直接將所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的事件數(shù)據(jù)對象轉(zhuǎn)換為目標(biāo)庫的事件數(shù)據(jù)對象。

5.如權(quán)利要求1所述方法，其特征在于，所述接收數(shù)據(jù)轉(zhuǎn)換操作完成的轉(zhuǎn)換后數(shù)據(jù)，將所述轉(zhuǎn)換后數(shù)據(jù)載入到目標(biāo)數(shù)據(jù)庫的寬表中包括：

接收數(shù)據(jù)載入請求，并將相同主鍵的數(shù)據(jù)按照數(shù)據(jù)的事件類型以及數(shù)據(jù)的內(nèi)容生成事件操作語句；

調(diào)用所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫，執(zhí)行對應(yīng)的結(jié)構(gòu)化查詢語言語句，完成數(shù)據(jù)載入。

6.如權(quán)利要求5所述方法，其特征在于，所述數(shù)據(jù)的事件類型包括插入事件、更新事件以及刪除事件中至少一種。

7.一種結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的寬表生成裝置，其特征在于，包括：

數(shù)據(jù)提取器，用于獲取所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的日志文件，并通過所述日志文件獲得所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫中的變更數(shù)據(jù)；

數(shù)據(jù)轉(zhuǎn)換器，用于根據(jù)所述變更數(shù)據(jù)獲得所述日志文件對應(yīng)的關(guān)聯(lián)表的關(guān)聯(lián)關(guān)系以及數(shù)據(jù)的待執(zhí)行操作，執(zhí)行所述數(shù)據(jù)的轉(zhuǎn)換操作；

數(shù)據(jù)下載器，用于接收數(shù)據(jù)轉(zhuǎn)換操作完成的轉(zhuǎn)換后數(shù)據(jù)，將所述轉(zhuǎn)換后數(shù)據(jù)載入到目標(biāo)數(shù)據(jù)庫的寬表中；

其中，所述數(shù)據(jù)轉(zhuǎn)換器包括：

關(guān)聯(lián)管理器，用于根據(jù)所述變更數(shù)據(jù)獲得所述日志文件對應(yīng)的關(guān)聯(lián)表，并判斷所述關(guān)聯(lián)表中的數(shù)據(jù)是否為主表數(shù)據(jù)；

第一主表處理器，用于如果所述數(shù)據(jù)為主表數(shù)據(jù)，且所述待執(zhí)行操作為插入操作，根據(jù)關(guān)聯(lián)表的關(guān)聯(lián)關(guān)系，生成關(guān)聯(lián)查詢語句，查詢所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫，并將查詢到的數(shù)據(jù)轉(zhuǎn)換為目標(biāo)庫的事件數(shù)據(jù)對象；

第二主表處理器，用于如果所述數(shù)據(jù)為主表數(shù)據(jù)，且所述待執(zhí)行操作為刪除操作或者更新操作，直接將所述結(jié)構(gòu)化查詢語言數(shù)據(jù)庫的事件數(shù)據(jù)對象轉(zhuǎn)換為目標(biāo)庫的事件數(shù)據(jù)對象。