[發明專利]一種離線系統之間的數據交互方法及系統

有效

• 申請號: 201910781684.6
• 申請日: 2019-08-23
• 公開（公告）號: CN110502478B
• 公開（公告）日: 2023-05-23
• 發明（設計）人: 廖偉;汪勇強;潘江川
• 申請（專利權）人: 成都九洲電子信息系統股份有限公司
• 主分類號: G06F16/13
• 分類號: G06F16/13;G06F16/16;G06F21/60;G06F21/62
• 代理公司: 成都虹盛匯泉專利代理有限公司 51268
• 代理人: 劉冬靜

本發明公開了一種離線系統之間的數據交互方法及系統，該方法包括根據配置信息計算所有需要導出的數據，按照協議生成數據包，數據包驗證，數據解析，數據合法性驗證，數據修改，數據唯一性驗證，唯一性確認，數據導入等步驟。本發明通過將數據庫原始數據按照協議要求寫文件、將文件數據按照協議要求讀取并導入數據庫中，并增加了數據解析、數據修改、數據唯一性驗證等處理，保證實現導入數據的正確交互。

技術領域

本發明屬于數據傳輸技術領域，具體涉及一種基于網絡物理隔絕下系統之間的數據交互方法及系統。

背景技術

隨著系統數據量和系統中的業務種類不斷增長，原有的特殊業務處理方法已不能滿足快速新增和快速變更的業務需求，在實際應用中也增加了開發工作量，且存在很多普遍處理流程的重復定義。常用的系統數據交互存在很多問題，如：

(1)業務修改、重構，導致數據結構變更，對數據交互過程中數據抽取、數據清洗、數據轉換都有影響，修改工作量大，維護成本高；

(2)元數據格式(JSON/XML)、傳輸文件的組裝方式、數據解析方式等，可能存在同一個系統，不同業務采用各自不同的標準，系統沒有統一的標準；

(3)系統特殊業務處理沒有統一接口，無法重用；

(4)數據導出過程、導入過程非常耗時，沒有統一的批處理方法，等待時間長；

(5)用戶導入導出過程體驗效果差，大多無法追蹤顯示當前處理過程；

(6)系統導入過程中，如遇到異常、錯誤等,很難在大量數據中找出錯誤數據，且因為異常導致的處理流程停止很難從失敗的地方重新開始。

發明內容

本發明的主要目的在于提供一種離線系統之間的數據交互方法，旨在解決既有方法中存在的以上技術問題。

為實現上述目的，本發明提供一種離線系統之間的數據交互方法，包括以下步驟：

S1、根據配置信息計算所有需要導出的數據增量或全量，將所有數據存放于數據庫表中；

S2、按照協議生成數據臨時文件，同時生成數據包的驗證文件和數據版本信息文件，將所有需要導出的元數據進行打包、壓縮、加密處理，并刪除臨時文件；

S3、將數據包文件導入目標系統并進行解密處理，并對數據包進行包驗證；

S4、采用多線程將元數據文件讀取到內存，按照協議進行反轉碼；將解析后的數據保存至數據庫中，使用臨時表暫時記錄從數據包中讀取到的數據，并記錄下所有導入的數據的狀態信息；

S5、將臨時表中的數據導入到業務表中，與目標系統已存在的數據進行合并，并修改行數據的是否已導入狀態信息。

進一步地，所述對數據包進行包驗證具體為：

判斷數據包是否完整、是否為目標系統需要的數據包、用戶自定義的驗證信息是否正確；若數據包滿足所有條件，則進入下一步驟；否則提示用戶錯誤信息并終止導入。

進一步地，在步驟S1中將與本系統業務有關的數據信息轉換為特定的字符編碼信息；再在步驟S4中將特定的字符編碼信息轉換成目標系統能識別的業務編碼信息。

進一步地，所述導入數據的狀態信息具體包括是否通過字段驗證信息、是否通過唯一性驗證信息、是否已導入信息、數據的導入標準信息。

進一步地，在異構系統之間進行數據交互時，在步驟S4后還包括：

對臨時表中的數據進行合法性驗證，并將驗證結果記錄在數據庫中，修改行數據的是否通過字段驗證狀態信息。

進一步地，所述記錄的驗證結果具體包括用于指導用戶快速定位及修改的錯誤數據、錯誤提示、修改建議數據。