[發明專利]一種基于kettle商業智能平臺異步下載的方法

在審

• 申請號: 202011055484.1
• 申請日: 2020-09-29
• 公開（公告）號: CN112162985A
• 公開（公告）日: 2021-01-01
• 發明（設計）人: 余麗玲;劉躍紅;管正爽;張衛
• 申請（專利權）人: 銀盛支付服務股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/27;G06F16/2455
• 代理公司: 深圳市深可信專利代理有限公司 44599
• 代理人: 張勇

本發明提供了一種基于kettle商業智能平臺異步下載的方法，涉及商業智能技術領域；該方法包括以下的步驟：S1、通過從文件下載服務器查詢當前用戶先前所保存的文件；S2、在數據庫創建需要下載的大表對應的初始表；S3、編寫常用維度的schema模型；S4、對saiku進行二次開發，根據根據schema模型選出所需的字段；S5、獲取所需要下載的文件的維度、樣式和字段需求，查詢對應的初始表的模板數據給出用戶預覽樣式；S6、將用戶選好的維度和所需字段解析后，以參數形式傳遞至kettle；S7、獲得所需文件；S8、進行文件下載；本發明的有益效果是：通過將下載任務轉移到kettle后臺，改善了批量下載頁面卡死的問題。

技術領域

本發明涉及商業智能技術領域，更具體的說，本發明涉及一種基于kettle商業智能平臺異步下載的方法。

背景技術

隨著信息化程度不斷加深，企業對“大數據”分析服務的渴求也日益強烈。互聯網持續增長信息資源蘊含了巨量的具有商業價值的信息，成為重要的商業智能服務信息源頭。

目前很多商業智能分析工具，數據都存儲在oracle數據庫，基于oracle的商業智能分析平臺的下載大部分是同步的。由于業務需要，經常會有大數據量的下載需求，當批量下載時經常會出現頁面卡死，操作人員只能等待無法進行其他操作。加上商業智能分析平臺無法進行分布式擴容，面對大批量的下載操作經常出現集群負載過高從而癱瘓的情況。另外，支持的數據庫比較少，僅支持關系型數據庫，不支持nosql數據庫。

發明內容

為了克服現有技術的不足，本發明提供一種基于kettle商業智能平臺異步下載的方法，通過將下載任務轉移到kettle后臺，改善了批量下載頁面卡死的問題。

本發明解決其技術問題所采用的技術方案是：一種基于kettle商業智能平臺異步下載的方法，其改進之處在于，該方法包括以下的步驟：

S1、通過從文件下載服務器查詢當前用戶先前所保存的文件，在商業智能平臺上嵌套異步下載按鈕和文件下載服務器按鈕；

S2、在數據庫創建需要下載的大表對應的初始表，且該初始表中僅保存模板數據；

S3、編寫常用維度的schema模型；

S4、對saiku進行二次開發，根據根據schema模型選出所需的字段，當用戶需要下載文件時，查看文件下載服務器是否存在此用戶權限范圍內曾經下載過的文件，如存在，則通過文件下載服務器直接將文件下載到本地；如不存在，則進入步驟S5；

S5、獲取所需要下載的文件的維度、樣式和字段需求，查詢對應的初始表的模板數據給出用戶預覽樣式；

S6、將用戶選好的維度和所需字段解析后，以參數形式傳遞至kettle；

S7、kettle調用presto，根據相應的配置文件以及所需的文件去查詢相應的數據庫，獲得所需文件；

S8、進行文件下載，并將下載的文件保存到文件下載服務器。

進一步的，所述的步驟S1中，通過編寫代碼，從文件下載服務器查詢當前用戶先前所保存的文件。

進一步的，所述的步驟S2中，從文件下載服務器查詢當前用戶先前所保存的文件后，將文件展示在下載列表頁面。

進一步的，所述的步驟S4中，在對saiku進行二次開發時，在頁面添加下載按鈕，當用戶需要下載文件時，則點擊頁面的下載按鈕。

進一步的，所述的步驟S5中，當給出用戶預覽樣式時，在用戶進行確認后，則進入步驟S6，否則返回到步驟S5，重新獲取所需要下載的文件的維度、樣式和字段需求。