[發明專利]一種大數據分析引擎的數據庫適配方法

在審

• 申請號: 201710271322.3
• 申請日: 2017-04-24
• 公開（公告）號: CN106897467A
• 公開（公告）日: 2017-06-27
• 發明（設計）人: 王純斌;陳昌友;覃進學;張紅;劉佳
• 申請（專利權）人: 成都四方偉業軟件股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 成都金英專利代理事務所(普通合伙)51218
• 代理人: 袁英

技術領域

本發明涉及大數據分析處理技術領域，尤其涉及數據庫的查詢技術，具體是一種大數據分析引擎的數據庫適配方法。

背景技術

非關系型數據庫通過減少不常用的功能，提高了數據庫性能，它常用來處理雜亂的非結構化數據，例如高并發的網頁動態訪問信息等。在實際程序開發中，應用前端有很多業務需求，需要匹配不同的數據庫功能，使用性能更高、成本更低的非關系型數據庫可以提高數據庫的可擴展性。而大多數的業務運營支撐系統，例如電力運營、銀行交易、電信客戶管理和電商等運營系統，大部分都是基于關系型數據庫而建設的，都涉及到大量的客戶信息的管理和查詢。在當前大數據產業背景下，各行各業都積累了大量歷史數據，在對海量數據進行挖掘的過程中，數據庫如何滿足不同的平臺應用從龐大的數據中快速響應用戶的查詢是一個重要和迫切的問題。

大量的應用平臺，由于數據存儲的差異，往往在訪問數據庫的的時候，效率低下，例如地理信息系統的大量空間數據需要快速地存取查詢和更新，而關系型數據庫對空間數據的讀取和存儲效率低下，擴展性差，并且物理消耗資源嚴重，不適用于空間數據應用平臺系統。各行各業的應用平臺不同，對數據庫的服務能力需求不同，而目前數據庫的服務能力只是單一地對接相應的平臺，無法解決對各行各業不同的應用平臺和復雜網絡環境的數據庫查詢服務問題。

本申請提供了一種網絡服務平臺，為不同行業的應用提供一種數據庫查詢匹配的服務能力，大量的應用根據該平臺定義的數據格式調用接口，該平臺返回適配各種數據庫的標準結構化查詢語句（Structured Query Language，SQL），可以進行關系型號數據庫和非關系型數據庫的查詢。其中，關系型數據庫查詢存在冗余，尤其是大數據的查詢操作中，往往存在大量的冗余，本發明解決了大數據背景下，為不同的應用平臺實現同時連接關系型數據庫和非關系型數據庫的問題。

發明內容

本發明的目的在于克服現有技術的不足，提供一種大數據分析引擎的數據庫適配方法，以至少達到為不同的應用平臺實現同時連接關系型數據庫和非關系型數據庫的效果。

本發明的目的是通過以下技術方案來實現的：一種大數據分析引擎的數據庫適配方法，它包括：

S1：定義數據規則，根據定義的數據規則，預先定義數據庫訪問語句能夠訪問的關系型數據庫；

S2：接收數據庫訪問指令，從接收的數據庫訪問指令中獲取數據庫查詢表標識信息；

S3：根據數據庫查詢表標識信息判斷數據庫訪問指令的操作對象，如果所述操作對象是關系型數據庫，則直接查詢所述的關系型數據庫；如果所述操作對象是非關系型數據庫，則將數據庫訪問指令轉換為非關系型數據庫能夠識別的操作指令；

S4：判斷訪問指令中的數據庫查詢語句對應的訪問操作是否為查詢類操作，如果所述訪問操作是查詢類操作，則根據數據庫語法將查詢類操作的訪問指令轉換為對應的數據庫查詢指令，使用所述數據庫查詢指令訪問相應的數據庫。

進一步，在步驟S1中，根據關系型數據庫的數據表建立關系型數據庫與數據庫語法的對應關系，根據所述的對應關系，使用結構化查詢語句訪問關系型數據庫。

進一步，在步驟S2中，則根據關系型數據庫的數據表標識信息確定訪問指令的目標關系型數據庫。

進一步，在步驟S3中，建立標準結構化查詢語句與不同的關系型數據庫的對應關系，使用相應的標準化查詢語句針對不同的數據庫進行相應地查詢。

進一步，根據關系型數據庫的數據表標識信息，將不同的關系型數據庫的結構化查詢語句轉換為適配不同類型數據庫的查詢語句。

進一步，在步驟S4之后，還包括一個返回步驟S5，所述的返回步驟S5，返回數據庫查詢操作結果到前端應用，實現前端應用匹配不同的數據庫。

本發明的有益效果是：（1）本發明可以降低開發人員對后端數據庫的依賴，將精力集中在前端業務層面，不用過多關心后端數據庫的選型、查詢和具體的數據庫語法等，可以精準、高效地完成數據處理。

（2）本發明的實施例，能夠同時訪問關系型數據庫和非關系型數據庫，保證數據庫性能的同時，可擴展性強。

（3）本發明的實施例，具有關系型數據庫的優勢，可以在一個數據表以及多個數據表之間做復雜的數據查詢和事務支持，保證數據訪問安全性。

（4）本發明的實施例，通過構建了一種大平臺，對大量應用，提供數據庫訪問匹配服務，提供相應的應用程序調用接口，通過返回適配各種數據庫的查詢語句，能夠查詢關系型數據庫和非關系型數據庫。