[發明專利]一種離線系統之間的數據交互方法及系統有效
| 申請號: | 201910781684.6 | 申請日: | 2019-08-23 |
| 公開(公告)號: | CN110502478B | 公開(公告)日: | 2023-05-23 |
| 發明(設計)人: | 廖偉;汪勇強;潘江川 | 申請(專利權)人: | 成都九洲電子信息系統股份有限公司 |
| 主分類號: | G06F16/13 | 分類號: | G06F16/13;G06F16/16;G06F21/60;G06F21/62 |
| 代理公司: | 成都虹盛匯泉專利代理有限公司 51268 | 代理人: | 劉冬靜 |
| 地址: | 610041 四川省成都*** | 國省代碼: | 四川;51 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 離線 系統 之間 數據 交互 方法 | ||
1.一種離線系統之間的數據交互方法,其特征在于,包括以下步驟:
S1、根據配置信息計算所有需要導出的數據增量或全量,將所有數據存放于數據庫表中;
S2、采用JDBC方式從數據庫表直接獲取數據,通過新增臨時表,將數據庫表中的數據插入臨時表,對臨時表進行查詢操作,再按照協議要求對數據進行抽取,得到元數據;
將所有需要導出的元數據按照協議要求進行相應的轉碼后寫入文件,然后將所有元數據文件打包,添加上數據包配置信息,并對最終的所有元數據文件進行加密處理,得到數據包文件,同時生成數據包的驗證文件和數據版本信息文件;并刪除臨時表;
步驟S2中的轉碼,具體為:將與目標系統業務有關的數據信息轉換為特定的字符編碼信息;
S3、將數據包文件導入目標系統并進行解密處理,并對數據包進行包驗證;
S4、采用多線程將元數據文件讀取到內存,按照協議進行反轉碼;將解析后的數據保存至數據庫中,使用臨時表暫時記錄從數據包中讀取到的數據,并記錄下所有導入的數據的狀態信息;
步驟S4中的反轉碼,具體為:將特定的字符編碼信息轉換成目標系統能識別的業務編碼信息;
所述導入的數據的狀態信息具體包括是否通過字段驗證信息、是否通過唯一性驗證信息、是否已導入信息、數據的導入標準信息;
在異構系統之間進行數據交互時,在步驟S4后還包括:
對臨時表中的數據進行合法性驗證,并將驗證結果記錄在數據庫中,修改行數據的是否通過字段驗證狀態信息;
S5、將臨時表中的數據導入到業務表中,與目標系統已存在的數據進行合并,并修改行數據的是否已導入狀態信息。
2.如權利要求1所述的離線系統之間的數據交互方法,其特征在于,步驟S3中,所述對數據包進行包驗證具體為:
判斷數據包是否完整、是否為目標系統需要的數據包、用戶自定義的驗證信息是否正確;若數據包滿足所有條件,則進入下一步驟;否則提示用戶錯誤信息并終止導入。
3.如權利要求2所述的離線系統之間的數據交互方法,其特征在于,所述記錄的驗證結果具體包括用于指導用戶快速定位及修改的錯誤數據、錯誤提示、修改建議數據。
4.如權利要求3所述的離線系統之間的數據交互方法,其特征在于,在異構系統之間進行數據交互時,還包括:
通過動態加載業務功能界面,根據所述記錄的驗證結果展示錯誤數據信息,并在觸發時顯示錯誤提示信息及修改意見,對數據進行修改。
5.如權利要求4所述的離線系統之間的數據交互方法,其特征在于,在兩個系統之間同時操作同一業務時,還包括:
根據用戶定義的業務唯一性驗證規則及配置信息進行業務唯一性驗證,將未通過驗證的信息記錄到數據庫中;
對數據庫表中設置的主鍵進行唯一性驗證,將沖突的數據記錄到數據庫中并修改行數據的是否通過唯一性驗證狀態信息。
6.如權利要求5所述的離線系統之間的數據交互方法,其特征在于,在兩個系統之間同時操作同一業務時,還包括:
通過動態加載業務功能界面,對記錄的唯一性沖突數據進行確認;通過對比數據庫中原始數據與臨時表中的數據,選擇采用其中一種數據作為唯一數據。
7.一種應用權利要求1-6任一項所述的數據交互方法的數據交互系統,其特征在于,所述數據交互系統包括:
數據增量、全量計算模塊,用于根據配置信息計算所有需要導出的數據增量或全量,將所有數據存放于數據庫表中;
數據包生成模塊,用于采用JDBC方式從數據庫表直接獲取數據,通過新增臨時表,將數據庫表中的數據插入臨時表,對臨時表進行查詢操作,再按照協議要求對數據進行抽取,得到元數據;將所有需要導出的元數據按照協議要求進行相應的轉碼后寫入文件,然后將所有元數據文件打包,添加上數據包配置信息,并對最終的所有元數據文件進行加密處理,得到數據包文件,同時生成數據包的驗證文件和數據版本信息文件;并刪除臨時表;
數據包驗證模塊,用于將導入目標系統的數據包文件進行解密處理,并對數據包進行包驗證;
數據解析模塊,用于采用多線程將元數據文件讀取到內存,按照協議進行反轉碼;將解析后的數據保存至數據庫中,使用臨時表暫時記錄從數據包中讀取到的數據,并記錄下所有導入的數據的狀態信息;
數據修改模塊,用于對臨時表中的數據進行合法性驗證,并將驗證結果記錄在數據庫中,修改行數據的是否通過字段驗證狀態信息;通過動態加載業務功能界面,根據所述記錄的驗證結果展示錯誤數據信息,并在觸發時顯示錯誤提示信息及修改意見,對數據進行修改;
數據唯一性驗證模塊,用于根據用戶定義的業務唯一性驗證規則及配置信息進行業務唯一性驗證,將未通過驗證的信息記錄到數據庫中;對數據庫表中設置的主鍵進行唯一性驗證,將沖突的數據記錄到數據庫中并修改行數據的是否通過唯一性驗證狀態信息;通過動態加載業務功能界面,對記錄的唯一性沖突數據進行確認;通過對比數據庫中原始數據與臨時表中的數據,選擇采用其中一種數據作為唯一數據;
數據導入模塊,用于將臨時表中的數據導入到業務表中,與目標系統已存在的數據進行合并,并修改行數據的是否已導入狀態信息。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于成都九洲電子信息系統股份有限公司,未經成都九洲電子信息系統股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910781684.6/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





