[發明專利]數據處理方法及裝置

有效

• 申請號: 202010849567.1
• 申請日: 2020-06-19
• 公開（公告）號: CN111897891B
• 公開（公告）日: 2023-06-13
• 發明（設計）人: 陳梓麟
• 申請（專利權）人: 阿里云計算有限公司
• 主分類號: G06F16/28
• 分類號: G06F16/28;G06F16/242;G06F16/27
• 代理公司: 北京智信禾專利代理有限公司 11637
• 代理人: 李曉慶

1.一種數據處理方法，包括：

接收攜帶有查詢語句的數據處理請求；

基于所述數據處理請求將所述查詢語句解析為對應的抽象語法樹，且將所述抽象語法樹轉換為對應的關系代數樹，其中，所述關系代數樹由樹節點和邊組成；

基于所述關系代數樹確定所述查詢語句的執行計劃，且根據所述執行計劃計算所述查詢語句的物理執行代價；

在所述物理執行代價小于等于預設代價閾值的情況下，確定所述查詢語句對應的操作類型為第一類型；

在所述操作類型為第一類型的情況下，將所述查詢語句下發至第一數據庫，基于所述查詢語句在所述第一數據庫完成所述數據處理請求；

在所述物理執行代價大于預設代價閾值的情況下，確定所述查詢語句對應的操作類型為第二類型，在所述操作類型為第二類型的情況下，將所述查詢語句下發至第二數據庫，基于所述查詢語句在所述第二數據庫完成所述數據處理請求，其中，所述第一類型為?OLTP類型，所述第一數據庫為分布式讀寫數據庫，所述第二類型為?OLAP?類型，第二數據庫為分布式只讀數據庫。

2.根據權利要求1所述的數據處理方法，所述基于所述關系代數樹確定所述查詢語句的執行計劃，且根據所述執行計劃計算所述查詢語句的物理執行代價包括：

確定所述關系代數樹的樹節點，基于所述樹節點確定所述查詢語句的執行計劃；

基于所述查詢語句的執行計劃計算所述查詢語句對應的每個樹節點的物理執行代價；

將每個樹節點的物理執行代價進行加權相加，以獲得所述查詢語句的物理執行代價。

3.根據權利要求2所述的數據處理方法，所述在所述物理執行代價小于等于預設代價閾值的情況下，確定所述查詢語句對應的操作類型為第一類型包括：

在所述查詢語句對應的任意一個樹節點的物理執行代價小于等于預設代價閾值的情況下，確定所述查詢語句對應的操作類型為第一類型。

4.根據權利要求1所述的數據處理方法，所述第一數據庫為處理第一類型的查詢語句的分布式讀寫數據庫，所述第二數據庫為處理第二類型的查詢語句的分布式只讀數據庫。

5.根據權利要求4所述的數據處理方法，所述第一類型為OLTP類型；

相應的，所述在所述操作類型為第一類型的情況下，將所述查詢語句下發至第一數據庫包括：

在所述操作類型為OLTP類型的情況下，將所述查詢語句下發至所述分布式讀寫數據庫。

6.根據權利要求5所述的數據處理方法，所述第二類型為OLAP類型；

相應的，所述在所述查詢語句對應的操作類型為第二類型的情況下，將所述查詢語句下發至第二數據庫包括：

在所述查詢語句對應的操作類型為OLAP類型的情況下，將所述查詢語句下發至所述分布式只讀數據庫。

7.一種數據處理裝置，包括：

處理請求接收模塊，被配置為接收攜帶有查詢語句的數據處理請求；

操作類型確定模塊，被配置為基于所述數據處理請求將所述查詢語句解析為對應的抽象語法樹，且將所述抽象語法樹轉換為對應的關系代數樹，其中，所述關系代數樹由樹節點和邊組成，基于所述關系代數樹確定所述查詢語句的執行計劃，且根據所述執行計劃計算所述查詢語句的物理執行代價，在所述物理執行代價小于等于預設代價閾值的情況下，確定所述查詢語句對應的操作類型為第一類型，在所述物理執行代價大于預設代價閾值的情況下，確定所述查詢語句對應的操作類型為第二類型；

數據庫確定模塊，被配置為在所述操作類型為第一類型的情況下，將所述查詢語句下發至第一數據庫，基于所述查詢語句在所述第一數據庫完成所述數據處理請求，在所述操作類型為第二類型的情況下，將所述查詢語句下發至第二數據庫，基于所述查詢語句在所述第二數據庫完成所述數據處理請求，其中，所述第一類型為?OLTP?類型，所述第一數據庫為分布式讀寫數據庫，所述第二類型為?OLAP?類型，第二數據庫為分布式只讀數據庫。