[發明專利]一種動態配置外部導入數據的方法及系統

在審

• 申請號: 201510483386.0
• 申請日: 2015-08-07
• 公開（公告）號: CN105117431A
• 公開（公告）日: 2015-12-02
• 發明（設計）人: 王晉剛
• 申請（專利權）人: 北京思特奇信息技術股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京輕創知識產權代理有限公司 11212
• 代理人: 楊立

技術領域

本發明涉及數據管理技術領域，尤其涉及一種動態配置外部導入數據的方法及系統。

背景技術

在電信行業，待導入數據都有不同的導入數據類型、數據列定義以及檢驗功能，現有技術在處理外部數據導入時，實現步驟多，流程復雜，且每個傭金類型的導入和家宴操作都需要進行單獨管理，即對應一套相應的代碼。但是隨著不結算數據所對應的傭金類型不斷增多，現有的外部數據導入系統已經無法滿足需求，當出現一個新的傭金類型就要附一套對應的代碼以及對應的校驗模塊，這樣會造成代碼量龐大，沒有通用性，大大增加了維護人員的工作難度，當出現錯誤時，較難快速定位問題去解決。因此開發一套完整、統一、靈活、通用的動態配置外部導入數據的系統迫在眉睫。

發明內容

本發明所要解決的技術問題是針對現有技術的不足，提供一種動態配置外部導入數據的方法及系統。

本發明解決上述技術問題的技術方案如下：一種動態配置外部導入數據的方法，包括如下步驟：

步驟1，根據待導入數據配置業務類型配置表和字段列名配置表；

步驟2，根據相應業務類型獲取對應的字段列名配置表中的配置信息，并生成模板文檔；

步驟3，接收待導入文檔，判斷待導入文檔與模板文檔是否匹配，如果匹配執行步驟4；否則執行步驟5；

步驟4，從待導入文檔中讀取數據列動態插入到數據庫的相應表中；

步驟5，返回拒絕導入數據的反饋信息。

本發明的有益效果是：本發明降低了外部導入數據的開發和維護難度，通過在配置表中配置待導入數據所對應的數據類型和數據列定義，由程序去動態判斷，并且是否校驗以及如何校驗也在配置表中配置，由程序去動態判斷，這樣可以大大減少重復代碼的開發，當出現問題，能夠快速定位去解決。并且代碼具有通用性，可以進行系統之間的移植和使用。

在上述技術方案的基礎上，本發明還可以做如下改進。

進一步，所述業務類型配置表用于配置外部導入數據源的業務類型，所述字段列名配置表，用于完成相應業務類型的字段列名配置。

進一步，所述業務類型配置表包括外導類型ID、類型名稱、生效標識、所屬區域ID和備注；所述字段列名配置表包括外導類型ID、列名標識、列名備注、生效標識、所屬區域ID和備注。

進一步，所述字段列名配置表，還配置有校驗規則，在導入數據的時候對導入數據進行個性化的檢驗，更新校驗后相應的數據狀態及錯誤原因信息。

進一步，所述校驗規則包括數據類型、數據長度、是否為空、正則驗證、SQL驗證和SQL驗證信息中的一種或幾種。

進一步，步驟3的具體實現為：判斷待導入文檔列總數與相應業務類型所對應的字段列名配置表的配置總數是否相等，如果相等則匹配，如果不等則不匹配。

進一步，上述技術方案還包括查看導入數據時，讀取相應業務類型所對應的字段列名配置表中的列配置信息動態生成表頭。

本發明解決上述技術問題的另一技術方案如下：一種動態配置外部導入數據的系統，包括配置模塊、模板生成模塊、判斷模塊、數據插入模塊和反饋模塊；

所述配置模塊，其用于根據待導入數據配置業務類型配置表和字段列名配置表；

所述模板生成模塊，其用于根據相應業務類型獲取對應的字段列名配置表中的配置信息，并生成模板文檔；

所述判斷模塊，其用于判斷待導入文檔與模板文檔是否匹配，如果匹配調用數據插入模塊；否則調用反饋模塊；

所述數據插入模塊，其用于從待導入文檔中讀取數據列動態插入到數據庫的相應表中；

所述反饋模塊，其用于返回拒絕導入數據的反饋信息。

附圖說明

圖1為本發明所述一種動態配置外部導入數據的方法流程圖；

圖2為本發明所述一種動態配置外部導入數據的系統框圖。

附圖中，各標號所代表的部件列表如下：

1、配置模塊，2、模板生成模塊，3、判斷模塊，4、數據插入模塊，5、反饋模塊。

具體實施方式

以下結合附圖對本發明的原理和特征進行描述，所舉實例只用于解釋本發明，并非用于限定本發明的范圍。

本發明主要用于從本地導入數據文本文檔進入系統，并進行數據校驗和保存。其中，需要導入的數據類型和數據列需要在配置表中進行配置，導入的時候由程序去動態讀取，當數據列發生變化時，無需修改程序，并且能夠動態的校驗數據。由于該數據導入模塊可以進行系統之間的移植，因此具有通用性。

如圖1所示，一種動態配置外部導入數據的方法，包括如下步驟：