[發明專利]異構數據管理方法、裝置、設備和計算機可讀存儲介質

在審

• 申請號: 202011411803.8
• 申請日: 2020-12-04
• 公開（公告）號: CN112364052A
• 公開（公告）日: 2021-02-12
• 發明（設計）人: 任杰
• 申請（專利權）人: 深圳航天智慧城市系統技術研究院有限公司
• 主分類號: G06F16/242
• 分類號: G06F16/242;G06F16/25;G06F16/2455
• 代理公司: 深圳市添源知識產權代理事務所(普通合伙) 44451
• 代理人: 黎健任

1.一種異構數據管理方法，其特征在于，所述方法包括：

對基于統一查詢語言的查詢請求進行處理，得到統一查詢請求；

根據多個工作節點中每個工作節點的實時狀況，將所述統一查詢請求處理成互相獨立的子查詢請求后向所述多個工作節點分發；

對所述工作節點收到的子查詢請求進行統一抽象，得到多個統一抽象查詢子請求；

將所述多個統一抽象查詢子請求通過連接插件進行數據源適配，并將適配后的統一抽象查詢子請求發送至目標數據源執行數據查詢。

2.如權利要求1所述異構數據管理方法，其特征在于，所述對基于統一查詢語言的查詢請求進行處理，得到統一查詢請求，包括：

動態生成http數據請求接口；

通過所述動態生成的http數據請求接口接收所述基于統一查詢語言的查詢請求；

采用預設模板語法編譯所述統一查詢語言的查詢請求。

3.如權利要求2所述異構數據管理方法，其特征在于，所述方法還包括：

對所述目標數據源或所述數據查詢返回的結果數據進行分析，呈現所述結果數據之間的關聯關系；和/或

對所述目標數據源的數據進行標簽化管理。

4.如權利要求1所述異構數據管理方法，其特征在于，所述根據多個工作節點中每個工作節點的實時狀況，將所述統一查詢請求處理成互相獨立的子查詢請求后向所述多個工作節點分發，包括：

根據對所述統一查詢請求進行語義分析，將所述統一查詢請求分割為互相獨立的子查詢請求；

以固定周期查詢所述多個工作節點每個工作節點的工作狀態；

若發現所述多個工作節點存在工作狀態為可用的工作節點，則根據所述可用工作節點的負載和/或資源使用率，將所述子查詢請求分發給所述可用工作節點中負載相對較小和/或資源使用率相對較高的工作節點。

5.如權利要求4所述異構數據管理方法，其特征在于，所述方法還包括：

對所述可用工作節點返回的查詢結果進行數據聚合，經聚合后的查詢結果返回給查詢端。

6.如權利要求1所述異構數據管理方法，其特征在于，所述對所述工作節點收到的子查詢請求進行統一抽象，得到多個統一抽象查詢子請求之前或之后，還包括：

通過對外提供的http數據請求接口，接收用戶對查詢任務狀態的查詢。

7.如權利要求1至6任意一項所述異構數據管理方法，其特征在于，所述統一查詢語言為結構化查詢語言SQL。

8.一種異構數據管理裝置，其特征在于，所述裝置包括：

查詢請求處理模塊，用于對基于統一查詢語言的查詢請求進行處理，得到統一查詢請求；

調度模塊，用于根據多個工作節點中每個工作節點的實時狀況，將所述統一查詢請求處理成互相獨立的子查詢請求后向所述多個工作節點分發；

統一抽象模塊，用于對所述工作節點收到的子查詢請求進行統一抽象，得到多個統一抽象查詢子請求；

適配模塊，用于將所述多個統一抽象查詢子請求通過連接插件進行數據源適配，并將適配后的統一抽象查詢子請求發送至目標數據源執行數據查詢。

9.一種設備，所述設備包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，其特征在于，所述處理器執行所述計算機程序時實現如權利要求1至7任意一項所述方法的步驟。

10.一種計算機可讀存儲介質，所述計算機可讀存儲介質存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現如權利要求1至7任意一項所述方法的步驟。