[發(fā)明專利]數(shù)據(jù)抽取方法、裝置、計算機設備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110396717.2
• 申請日: 2021-04-13
• 公開（公告）號: CN113111088A
• 公開（公告）日: 2021-07-13
• 發(fā)明（設計）人: 王仁亮;鮑震;孟祥曉;銀雪萍;肖允偉;劉崢;王威
• 申請（專利權）人: 北京沃東天駿信息技術有限公司;北京京東世紀貿(mào)易有限公司
• 主分類號: G06F16/2455
• 分類號: G06F16/2455;G06F16/248;G06F16/25
• 代理公司: 北京同立鈞成知識產(chǎn)權代理有限公司 11205
• 代理人: 張娜;臧建明

本申請?zhí)峁┮环N數(shù)據(jù)抽取方法、裝置、計算機設備和存儲介質(zhì)，通過獲取用戶的報表分析請求，該報表分析請求包括：至少一個生產(chǎn)庫的標識，再根據(jù)至少一個生產(chǎn)庫的標識，查詢本地數(shù)據(jù)庫，獲取每個生產(chǎn)庫的數(shù)據(jù)，本地數(shù)據(jù)庫中預先存儲有從至少一個生產(chǎn)庫獲取到的至少一個數(shù)據(jù)源類型的數(shù)據(jù)，最后根據(jù)至少一個生產(chǎn)庫的數(shù)據(jù)，生成報表分析結果。該技術方案中，通過在本地數(shù)據(jù)庫中查詢至少一個數(shù)據(jù)源類型的數(shù)據(jù)，避免了對生產(chǎn)庫訪問產(chǎn)生的壓力、以及訪問過程中可能存在污染生產(chǎn)庫的情況發(fā)生，同時數(shù)據(jù)抽取可以將多種類型的生產(chǎn)庫的數(shù)據(jù)進行融合，以達到跨庫分析的目的。

技術領域

本申請涉及數(shù)據(jù)處理技術領域，尤其涉及一種數(shù)據(jù)抽取方法、裝置、計算機設備和存儲介質(zhì)。

背景技術

在互聯(lián)網(wǎng)高速發(fā)展的今天，無論是政府、企業(yè)、甚至社會的方方面面，時刻都在發(fā)生著巨大的變化，捕獲這些變化的數(shù)據(jù)，以形成報告對于相關用戶來說顯得尤為重要，因此，報表分析應運而生，即將這些變化的數(shù)據(jù)轉變?yōu)橛脩艨梢暬奈淖趾?或圖像。

在現(xiàn)有技術中，報表分析工具采用直連數(shù)據(jù)源所在生產(chǎn)庫，使用結構化查詢語言(Structured Query Language，SQL)腳本在生產(chǎn)庫中拽取所需要的數(shù)據(jù)，然后將這些數(shù)據(jù)進行可視化展示，例如，生成報表，以供用戶查看。

在實現(xiàn)本發(fā)明過程中，發(fā)明人發(fā)現(xiàn)現(xiàn)有技術中至少存在如下問題：需要從數(shù)據(jù)源所在生產(chǎn)庫獲取數(shù)據(jù)時，均需要直連該生產(chǎn)庫，會對生產(chǎn)庫產(chǎn)生訪問壓力，并且可能會存在污染生產(chǎn)庫的情況發(fā)生。

發(fā)明內(nèi)容

本申請實施例提供一種數(shù)據(jù)抽取方法、裝置、計算機設備和存儲介質(zhì)，用以解決現(xiàn)有技術中直連數(shù)據(jù)源所在生產(chǎn)庫時存在的生產(chǎn)庫訪問壓力大、可能會污染生產(chǎn)庫的問題。

第一方面，本申請實施例提供一種數(shù)據(jù)抽取方法，包括：

獲取用戶的報表分析請求，所述報表分析請求包括：至少一個生產(chǎn)庫的標識；

根據(jù)所述至少一個生產(chǎn)庫的標識，查詢本地數(shù)據(jù)庫，獲取每個生產(chǎn)庫的數(shù)據(jù)，所述本地數(shù)據(jù)庫中預先存儲有從至少一個生產(chǎn)庫獲取到的至少一個數(shù)據(jù)源類型的數(shù)據(jù)；

根據(jù)所述至少一個生產(chǎn)庫的數(shù)據(jù)，生成報表分析結果。

在第一方面一種可能的設計中，所述報表分析請求還包括：每個生產(chǎn)庫對應的數(shù)據(jù)源類型標識；

相應的，所述根據(jù)所述至少一個生產(chǎn)庫的標識，查詢本地數(shù)據(jù)庫，獲取每個生產(chǎn)庫的數(shù)據(jù)，包括：

對于每個生產(chǎn)庫，根據(jù)所述生產(chǎn)庫對應的數(shù)據(jù)源類型標識，在所述本地數(shù)據(jù)庫中，獲取所述生產(chǎn)庫對應數(shù)據(jù)源類型標識的數(shù)據(jù)。

在第一方面另一種可能的設計中，還包括：

獲取用戶的數(shù)據(jù)抽取請求，所述數(shù)據(jù)抽取請求包括：第一生產(chǎn)庫的標識和數(shù)據(jù)源類型；

根據(jù)預置的數(shù)據(jù)抽取規(guī)則，通過與每個生產(chǎn)庫之間的數(shù)據(jù)連接通路，從每個生產(chǎn)庫中獲取所述數(shù)據(jù)源類型的數(shù)據(jù)；

將所述數(shù)據(jù)源類型的數(shù)據(jù)存儲至本地數(shù)據(jù)庫中。

在該種可能的設計中，在所述獲取用戶的數(shù)據(jù)抽取請求之前，所述方法還包括：

獲取用戶的數(shù)據(jù)連接請求，所述數(shù)據(jù)連接請求包括：第二生產(chǎn)庫的標識；

根據(jù)所述數(shù)據(jù)連接請求，跳轉到指示用戶輸入通路建立配置信息的界面；

獲取所述用戶輸入的通路建立配置信息；

在所述通路建立配置信息驗證通過時，根據(jù)所述第二生產(chǎn)庫的標識和所述通路建立配置信息，分別建立與所述第二生產(chǎn)庫的數(shù)據(jù)連接通路。

可選的，所述方法還包括：