[發明專利]數據處理方法、裝置、設備及存儲介質

在審

• 申請號: 202010009911.6
• 申請日: 2020-01-06
• 公開（公告）號: CN111198917A
• 公開（公告）日: 2020-05-26
• 發明（設計）人: 鮮偉
• 申請（專利權）人: 中國建設銀行股份有限公司;建信金融科技有限責任公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/2458;G06F16/2453
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發明實施例公開了一種數據處理方法、裝置、設備及存儲介質。該方法包括：獲取待查詢的原始數據所屬的第一數據庫，以及待查詢方式所屬的第二數據庫；獲取所述第一數據庫的原始數據；其中，所述原始數據為所述第一數據庫的待存儲數據或已存儲數據；根據不同數據庫的數據格式轉換關系，將所述原始數據由所述第一數據庫支持的第一數據格式轉換為所述第二數據庫支持的第二數據格式；將轉換結果存入所述第二數據庫中，用于用戶從所述第二數據庫中查詢所述原始數據。以實現提高數據查詢的效率并且能夠支持多種數據查詢的使用場景的目的。

技術領域

本發明實施例涉及大數據技術領域，尤其涉及一種數據處理方法、裝置、設備及存儲介質。

背景技術

隨著金融行業海量數據的增長，傳統關系型數據庫和數據倉庫面臨數據處理效率和查詢效率低下的問題。在這種情況下，大數據應運而生，隨著大數據的興起以及發展，分布式技術已日趨成熟。它不僅能有效地解決數據存儲容量的問題，也能夠通過分布式計算方式提高數據處理效率，提供較好的技術生態來完成傳統技術無法解決的數據存儲和數據處理的問題。

然而，目前的處理方式通常是基于大數據ETL工具(Extract-Transform-Load，數據倉庫技術)，這種方式需要進行頻繁的讀寫操作，IO(Input Output，輸入輸出)壓力比較大，進而導致數據處理效率較慢。

因此，亟需一種數據處理方式，能夠提高數據查詢的效率并且能夠支持多種數據查詢的使用場景。

發明內容

本發明提供一種數據處理方法、裝置、設備及存儲介質，以實現提高數據查詢的效率并且能夠支持多種數據查詢的使用場景的目的。

第一方面，本發明實施例提供了一種數據處理方法，包括：

獲取待查詢的原始數據所屬的第一數據庫，以及待查詢方式所屬的第二數據庫；

獲取所述第一數據庫的原始數據；其中，所述原始數據為所述第一數據庫的待存儲數據或已存儲數據；

根據不同數據庫的數據格式轉換關系，將所述原始數據由所述第一數據庫支持的第一數據格式轉換為所述第二數據庫支持的第二數據格式；

將轉換結果存入所述第二數據庫中，用于用戶從所述第二數據庫中查詢所述原始數據。

第二方面，本發明實施例還提供了一種數據處理裝置，包括：

數據庫獲取模塊，用于獲取待查詢的原始數據所屬的第一數據庫，以及待查詢方式所屬的第二數據庫；

原始數據獲取模塊，用于獲取所述第一數據庫的原始數據；其中，所述原始數據為所述第一數據庫的待存儲數據或已存儲數據；

數據格式轉換模塊，用于根據不同數據庫的數據格式轉換關系，將所述原始數據由所述第一數據庫支持的第一數據格式轉換為所述第二數據庫支持的第二數據格式；

轉換結果存儲模塊，用于將轉換結果存入所述第二數據庫中，用于用戶從所述第二數據庫中查詢所述原始數據。

第三方面，本發明實施例還提供了一種計算機設備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，所述處理器執行所述程序時實現如本發明實施例中任一所述的數據處理方法。

第四方面，本發明實施例還提供了一種計算機可讀存儲介質，其上存儲有計算機程序，該程序被處理器執行時實現如本發明實施例中任一所述的數據處理方法。