[發明專利]一種大數據量的數據交換方法

在審

• 申請號: 201310501718.4
• 申請日: 2013-10-23
• 公開（公告）號: CN103516814A
• 公開（公告）日: 2014-01-15
• 發明（設計）人: 程林;楊培強;王永軍
• 申請（專利權）人: 浪潮齊魯軟件產業有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;H04L29/06;H04L12/861
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術領域

本發明涉及信息處理技術領域，具體的說是一種采用集群方式、提高系統可靠性的大數據量的數據交換方法。

背景技術

在當前的社會情況下，各行業、部門在開發自己系統時都很少考慮到整體規劃問題，由此產生了各系統間缺乏統一的數據標準。在局域網、內部網的應用系統間的數據交換與共享，大多采用開發獨立的數據交換程序來完成所需，過多的點對點連接增加系統的復雜性和不穩定性，造成數據交換困難，“信息孤島”問題愈發突出。隨著信息共享需求的不斷增加，原有各系統間的交互性就越來越必要，為了使各系統能夠更順利的實現信息共享，實現信息的一致性的要求越來越迫切。

一般系統間實現信息共享有兩種方式：一是針對需求開發單獨數據交換程序，使各應用系統兼容。但是這種方法耗時耗力，而且存在系統耦合度高，顯然這種方案是一般人無法接受的。二就是構建一個能夠兼容各行業、部門的數據交換平臺，平臺內部制定數據交換標準。

基于此，本發明提供一種基于大數據量的數據交換方法，該方法采用的數據交換平臺應用第二種實現方式構建。

發明內容

本發明的技術任務是解決現有技術的不足，提供一種大數據量的數據交換方法。

本發明的技術方案是按以下方式實現的，該一種大數據量的數據交換方法，其具體實現過程為:

一、搭建數據交換平臺，該平臺采用EJB3.0分布式架構，架構由配置管理模塊、數據交換模塊、監控管理模塊和數據資源模塊構成：

配置管理模塊提供統一的配置維護界面，允許編輯、保存，以實現動態管理，為各類配置設計統一的服務，統一配置數據交換方式；

數據交換模塊由報文接入、報文處理、服務路由、報文傳輸四部分組成：其中報文接入提供渠道認證機制，對進行交互的外部門系統進行身份確認，保證信息交換過程的安全性；報文處理根據交換報文的控制信息完成報文的壓縮或解壓縮、編碼或解碼、加簽或驗簽、加密或解密和報文拆分；服務路由支持自定義路由參數和規則的路由機制，實現基于內容和規則的各類復雜路由場景，這里的路由參數包括地域、渠道系統、交易服務以及各類自定義業務參數；報文傳輸是進行數據傳輸的技術通道，支持同外部和內部各類應用系統的物理層銜接，將自身的資源以標準的技術協議發布給外部系統使用；

監控管理模塊對外部信息交互的業務數據、交互過程進行監控，提供業務交換數據的交換狀態監視、查詢和統計分析功能；

數據資源模塊提供數據需要的文件系統和數據庫；

二、由數據交換模塊完成數據交換過程：

1）數據交換任務根據執行策略從數據資源模塊中調用報文接入；

2）報文處理完成報文處理及報文的加解密工作；

3）通過報文傳輸將報文發送到相應的外部系統。

在上述技術方案中，數據交換平臺實現了邏輯上的總線功能，連接了各個不同應用系統，負責不同應用系統的數據源間的數據交換與共享。數據交換平臺可實現不同系統之間的任意的數據交換與共享。

所述配置管理模塊具體包括：任務管理、傳送方式設置、加密解密設置、壓縮解壓設置、監控設置、路由設置、目錄管理和服務管理。

所述監控管理模塊具體包括：查詢統計、日志監控、發送監控、接收監控、報文監控和隊列監控。

所述數據交換模塊中的報文接入具體包括：協議適配、安全認證、邏輯檢查和數據緩存；報文處理具體包括格式轉換、報文拆分、壓縮解壓、加密解密；報文傳輸具體包括：報文發送、報文接收。

所述報文傳輸對下列不同的應用進行技術協議適配：Web?Service、FTP、MQ、JMS交換協議。

所述步驟二的詳細過程為：

1）定時任務根據執行策略調用業務處理服務；

2）業務處理服務獲取需推送文件或數據；

3）業務處理程序將數據拼裝成報文；

4）根據加密解密設置對報文進行加密解密；

5）根據壓縮解壓設置對報文進行壓縮解壓；

6）將加密后的二進制數據轉換成字符串格式；

7）將大批量交換報文的拆分為多個小報文；

8）根據報文中的外部系統ID，將報文發送到相應的外部系統適配器；

9）適配器將報文發送給外部系統。

本發明與現有技術相比所產生的有益效果是：