[發(fā)明專利]一種基于kettle的供數(shù)方法、系統(tǒng)、終端設(shè)備及介質(zhì)

在審

• 申請?zhí)枺?/td>: 201910003239.7
• 申請日: 2019-01-03
• 公開（公告）號: CN109871413A
• 公開（公告）日: 2019-06-11
• 發(fā)明（設(shè)計）人: 周之浩
• 申請（專利權(quán)）人: 深圳壹賬通智能科技有限公司
• 主分類號: G06F16/28
• 分類號: G06F16/28;G06F16/2458;G06F16/27
• 代理公司: 深圳市隆天聯(lián)鼎知識產(chǎn)權(quán)代理有限公司 44232
• 代理人: 劉抗美

1.一種基于kettle的供數(shù)方法，其特征在于，所述方法包括：

當(dāng)檢測到第三方用戶的供數(shù)請求時，通過解析所述供數(shù)請求生成針對所述供數(shù)請求的建表文件，所述建表文件中包含用于所述第三方用戶創(chuàng)建數(shù)據(jù)表的建表語句；

檢測是否接收到所述第三方用戶發(fā)送的終止建表指令；

當(dāng)接收到所述終止建表指令時，將目標(biāo)業(yè)務(wù)方數(shù)據(jù)導(dǎo)入所述第三方用戶創(chuàng)建的數(shù)據(jù)表中；其中，所述目標(biāo)業(yè)務(wù)方數(shù)據(jù)通過kettle工具抽取獲得，所述第三方用戶所創(chuàng)建的數(shù)據(jù)表依據(jù)所述建表文件創(chuàng)建獲得。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述當(dāng)檢測到第三方用戶的供數(shù)請求時，通過解析所述供數(shù)請求生成針對所述供數(shù)請求的建表文件，包括：

當(dāng)檢測到第三方用戶的供數(shù)請求時，通過解析所述供數(shù)請求生成kettle任務(wù)，以使kettle工具根據(jù)所述kettle任務(wù)的指示對業(yè)務(wù)方源表進(jìn)行數(shù)據(jù)抽取操作得到目標(biāo)業(yè)務(wù)方數(shù)據(jù)；

通過hive工具建立與所述目標(biāo)業(yè)務(wù)方數(shù)據(jù)對應(yīng)的hive表；

依據(jù)所述hive表生成建表文件。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述通過hive工具建立與所述目標(biāo)業(yè)務(wù)方數(shù)據(jù)對應(yīng)的hive表之后，所述方法還包括：

通過掃描所述hive表對應(yīng)的hive元數(shù)據(jù)表和所述業(yè)務(wù)方源表，判斷所述業(yè)務(wù)方源表中是否存在變更源表；其中，所述hive元數(shù)據(jù)表中存儲有所述業(yè)務(wù)方源表的表結(jié)構(gòu)信息；

當(dāng)判斷出所述業(yè)務(wù)方源表中不存在所述變更源表時，執(zhí)行所述的依據(jù)所述hive表生成建表文件。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，當(dāng)判斷出所述業(yè)務(wù)方源表中存在所述變更源表時，所述方法還包括：

發(fā)送用于提示更新所述hive表的提示信息至目標(biāo)賬號。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述發(fā)送用于提示更新所述hive表的提示信息至目標(biāo)賬號之后，所述方法還包括：

依據(jù)所述hive元數(shù)據(jù)表和所述變更源表獲得變更信息；

將所述變更信息發(fā)送給所述目標(biāo)賬號，以使所述目標(biāo)賬號的所有者參考所述變更信息對所述hive表執(zhí)行更表操作；

當(dāng)檢測到所述目標(biāo)賬號的所有者針對所述hive表的更表操作終止時，依據(jù)更新后的hive表生成所述建表文件。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述當(dāng)檢測到第三方用戶的供數(shù)請求時，通過解析所述供數(shù)請求生成針對所述供數(shù)請求的建表文件之后，所述方法還包括：

設(shè)置所述建表文件的下載方式為預(yù)設(shè)下載方式；

當(dāng)檢測到所述第三方用戶輸入的針對所述建表文件的下載請求時，判斷所述第三方用戶啟用的下載方式與所述預(yù)設(shè)下載方式是否匹配；

當(dāng)所述第三方用戶啟用的下載方式與所述預(yù)設(shè)下載方式匹配時，響應(yīng)所述下載請求以將所述建表文件傳輸至所述第三方用戶。

7.根據(jù)權(quán)利要求3～5任一項所述的方法，其特征在于，所述通過掃描所述hive表對應(yīng)的hive元數(shù)據(jù)表和所述業(yè)務(wù)方源表，判斷所述業(yè)務(wù)方源表中是否存在變更源表，包括：

將所述hive元數(shù)據(jù)表中記錄的所述業(yè)務(wù)方源表的結(jié)構(gòu)信息與所述業(yè)務(wù)方源表的結(jié)構(gòu)信息進(jìn)行比對獲得比對結(jié)果；

當(dāng)所述比對結(jié)果指示所述hive元數(shù)據(jù)表中記錄的所述業(yè)務(wù)方源表的結(jié)構(gòu)信息與所述業(yè)務(wù)方源表的結(jié)構(gòu)信息匹配時，確定所述業(yè)務(wù)方源表中不存在變更源表；

當(dāng)所述比對結(jié)果指示所述hive元數(shù)據(jù)表中記錄的所述業(yè)務(wù)方源表的結(jié)構(gòu)信息與所述業(yè)務(wù)方源表的結(jié)構(gòu)信息不匹配時，確定所述業(yè)務(wù)方源表中存在所述變更源表。