[發明專利]數據管理和處理方法、裝置、計算機系統及可讀存儲介質

在審

• 申請號: 201911312980.8
• 申請日: 2019-12-18
• 公開（公告）號: CN112988739A
• 公開（公告）日: 2021-06-18
• 發明（設計）人: 王煜驄;酆曉杰
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F9/46;G06F9/50
• 代理公司: 北京智信四方知識產權代理有限公司 11519
• 代理人: 呂雁葭;宋海龍

1.一種數據管理方法，其特征在于，包括：

獲取多個數據獲取裝置的邏輯拓撲結構，所述邏輯拓撲結構是根據所述多個數據獲取裝置的分組信息確定的；

獲取計算資源與所述邏輯拓撲結構中的節點的資源-節點對應關系；

根據所述邏輯拓撲結構和所述資源-節點對應關系，確定用于處理所述多個數據獲取裝置中的指定數據獲取裝置所獲取的數據的指定計算資源。

2.根據權利要求1所述的方法，其特征在于：

所述數據獲取裝置包括采集實體；和/或

所述數據獲取裝置包括采集代理和一個或多個采集實體；和/或

所述分組信息包括所述數據獲取裝置的物理分組信息和/或邏輯分組信息。

3.根據權利要求1所述的方法，其特征在于：

所述邏輯拓撲結構包括樹結構；和/或

所述計算資源包括數據管道。

4.根據權利要求1所述的方法，其特征在于，根據所述邏輯拓撲結構和所述資源-節點對應關系，確定用于處理所述指定數據獲取裝置所獲取的數據的指定計算資源，包括：

從所述指定數據獲取裝置所對應的邏輯拓撲結構的節點，沿所述邏輯拓撲結構自下向上進行遍歷，確定第一個具有用于處理所述指定數據獲取裝置的相應業務數據的對應計算資源的指定節點，將所述指定節點所對應的計算資源作為所述用于處理所述指定數據獲取裝置所獲取的數據的指定計算資源。

5.根據權利要求1所述的方法，其特征在于，還包括：

獲取所述計算資源的狀態信息；

在所述計算資源的狀態信息滿足第一預設條件的情況下，確定所述計算資源所對應的節點的一個或多個下游節點；

建立所述下游節點與另一計算資源之間的對應關系并更新所述資源-節點對應關系。

6.根據權利要求5所述的方法，其特征在于：

所述計算資源的狀態信息滿足第一預設條件，包括所述計算資源的負載達到或超過預設閾值；和/或

所述另一計算資源與所述邏輯拓撲結構中的其他節點所對應的計算資源均不同，或者所述另一計算資源是所述邏輯拓撲結構中的其他節點所對應的計算資源中滿足第二預設條件的計算資源。

7.根據權利要求6所述的方法，其特征在于，所述第二預設條件是所述其他節點所對應的計算資源的負載小于預定閾值。

8.根據權利要求5所述的方法，其特征在于，所述根據所述邏輯拓撲結構和所述資源-節點對應關系，確定用于處理所述多個數據獲取裝置中的指定數據獲取裝置所獲取的數據的指定計算資源，包括：

根據所述邏輯拓撲結構和更新的所述資源-節點對應關系，確定用于處理所述指定數據獲取裝置所獲取的數據的指定計算資源。

9.一種數據處理方法，其特征在于，包括：

通過指定數據獲取裝置獲取數據；

確定用于處理所述數據的指定計算資源，所述指定計算資源是根據多個數據獲取裝置的邏輯拓撲結構和計算資源與所述邏輯拓撲結構中的節點的資源-節點對應關系確定的；

將所述數據傳輸到所述指定計算資源進行處理，

其中，所述邏輯拓撲結構是根據所述多個數據獲取裝置的分組信息確定的。

10.根據權利要求9所述的方法，其特征在于：

所述數據獲取裝置包括采集實體；和/或

所述數據獲取裝置包括采集代理和一個或多個采集實體；和/或

所述分組信息包括所述數據獲取裝置的物理分組信息和/或邏輯分組信息。

11.根據權利要求9所述的方法，其特征在于：

所述邏輯拓撲結構包括樹結構；和/或

所述計算資源包括數據管道。