[發明專利]一種基于海量數據的數據交換方法

在審

• 申請號: 202010722793.3
• 申請日: 2020-07-24
• 公開（公告）號: CN111858098A
• 公開（公告）日: 2020-10-30
• 發明（設計）人: 鄧羽平;劉魁;曹亮
• 申請（專利權）人: 成都成信高科信息技術有限公司;成都信息工程大學
• 主分類號: G06F9/54
• 分類號: G06F9/54;G06F9/455;G06F11/14
• 代理公司: 成都金英專利代理事務所(普通合伙) 51218
• 代理人: 袁英

1.一種基于海量數據的數據交換方法，包括集中式數據中心、若干個數據從節點和一個鏡像倉庫；其特征在于，包括如下步驟：

S1：集中式數據中心接收到消息請求后，獲取最不經常使用的數據從節點信息；

S2：集中式數據中心通過消息隊列與最不經常使用的數據從節點進行通信，向其所在的主題隊列發送消息以及對應的鏡像文件；

S3：數據從節點訂閱消息隊列中的主題；

S4：數據從節點自動去本地鏡像倉庫拉取所需的算法鏡像；

S5：拉取的鏡像賦予數據從節點一定的計算能力，對采集的數據進行預處理；

S6：數據從節點將處理結果發送到集中式數據中心的接收主題所對應的隊列；

S7：集中式數據中心從接收主題隊列中獲取到處理結果后，記錄在本地然后直接返回給消息請求者。

2.根據權利要求1所述的一種基于海量數據的數據交換方法，其特征在于，所述步驟S5包括子步驟：

S501：通過鏡像部署容器的方式為數據從節點提供計算方法；

S502：通過對鏡像的擴展與精簡來提高數據從節點的計算能力。

3.根據權利要求1所述的一種基于海量數據的數據交換方法，其特征在于，在一些高敏任務中，所述步驟S5包括子步驟：

S503：數據從節點通過下載算法鏡像獲取特定的預警計算功能；

S504：根據預警計算功能的評估指標對采集數據進行評估；

S505：判斷評估分數是否滿足預設的期望值，若未滿足，則通過消息隊列將該采集任務下發到用戶群進行預警。

4.根據權利要求1所述的一種基于海量數據的數據交換方法，其特征在于，需要在一定物理范圍內多個從節點高可靠運行協調任務時，所述步驟S2后還包括：

S21：在多個數據從節點上熱備多個容器任務；

S22：當其中一個容器任務異常退出，其他數據從節點的容器任務自動進行選舉運行。

5.根據權利要求1所述的一種基于海量數據的數據交換方法，其特征在于，所述數據從節點具備存儲功能，能夠存儲關鍵元數據信息，當存在實時響應需求時，可以在本地處理數據從而快速響應。