[發明專利]數據處理方法以及系統

在審

• 申請號: 202111339770.5
• 申請日: 2021-11-12
• 公開（公告）號: CN114254036A
• 公開（公告）日: 2022-03-29
• 發明（設計）人: 劉顯;鄭方;羅從難;郭援非;朱澄;朱瀟威
• 申請（專利權）人: 阿里巴巴（中國）有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27
• 代理公司: 北京智信禾專利代理有限公司 11637
• 代理人: 趙杰

本說明書實施例提供數據處理方法以及系統，其中所述數據處理方法，應用于分布式數據處理系統的數據處理節點，包括：接收客戶端發送的多個數據處理請求，基于所述多個數據處理請求的數量確定目標處理數量，并根據所述目標處理數量對所述多個數據處理請求進行限流處理，獲得目標數據處理請求；將所述目標數據處理請求轉發至全局事務管理器，并接收所述全局事務管理器對所述目標數據處理請求進行處理的處理結果，且將所述處理結果返回至每個數據處理請求對應的客戶端。

技術領域

本說明書實施例涉及計算機技術領域，特別涉及一種數據處理方法。本說明書一個或者多個實施例同時涉及一種數據處理系統，一種計算設備，以及一種計算機可讀存儲介質。

背景技術

數據庫采用多主MPP(Massive Parallel Processing)架構。該系統由兩組計算機節點組成：主節點和數據節點。數據庫依賴于一個稱為全局事務管理器(GTM)的組件來支持快照隔離。盡管GTM組件可以通過多進程或多線程實現以提高其并行性，但它本質上是中心化的，并且隨著并發事務數量的增加與GTM組件的連接數量會大幅度地增加，不僅會對GTM組件的運行造成較大的壓力，也會成為整個分布式數據庫系統嚴重的系統瓶頸。

發明內容

有鑒于此，本說明書施例提供了一種數據處理方法。本說明書一個或者多個實施例同時涉及一種數據處理系統，一種計算設備，以及一種計算機可讀存儲介質，以解決現有技術中存在的技術缺陷。

根據本說明書實施例的第一方面，提供了一種數據處理方法，應用于分布式數據處理系統的數據處理節點，包括：

接收客戶端發送的多個數據處理請求，基于所述多個數據處理請求的數量確定目標處理數量，并根據所述目標處理數量對所述多個數據處理請求進行限流處理，獲得目標數據處理請求；

將所述目標數據處理請求轉發至全局事務管理器，并接收所述全局事務管理器對所述目標數據處理請求進行處理的處理結果，且將所述處理結果返回至每個數據處理請求對應的客戶端。

根據本說明書實施例的第二方面，提供了一種數據處理系統，所述數據處理系統包括數據處理節點，所述數據處理節點包括：

請求接收模塊，被配置為接收客戶端發送的多個數據處理請求，基于所述多個數據處理請求的數量確定目標處理數量，并根據所述目標處理數量對所述多個數據處理請求進行限流處理，獲得目標數據處理請求；

代理模塊，被配置為將所述目標數據處理請求轉發至全局事務管理器，并接收所述全局事務管理器對所述目標數據處理請求進行處理的處理結果，且將所述處理結果返回至每個數據處理請求對應的客戶端。

根據本說明書實施例的第三方面，提供了一種計算設備，包括：

存儲器和處理器；

所述存儲器用于存儲計算機可執行指令，所述處理器用于執行所述計算機可執行指令，其中，所述處理器執行所述計算機可執行指令時實現所述數據處理方法的步驟。

根據本說明書實施例的第四方面，提供了一種計算機可讀存儲介質，其存儲有計算機可執行指令，該指令被處理器執行時實現所述數據處理方法的步驟。

本說明書一個實施例提供的數據處理方法，應用于分布式數據處理系統的數據處理節點，包括：接收客戶端發送的多個數據處理請求，基于所述多個數據處理請求的數量確定目標處理數量，并根據所述目標處理數量對所述多個數據處理請求進行限流處理，獲得目標數據處理請求；將所述目標數據處理請求轉發至全局事務管理器，并接收所述全局事務管理器對所述目標數據處理請求進行處理的處理結果，且將所述處理結果返回至每個數據處理請求對應的客戶端。