[發明專利]一種數據處理方法、裝置、設備及可讀存儲介質

在審

• 申請號: 202210064712.4
• 申請日: 2022-01-19
• 公開（公告）號: CN114416877A
• 公開（公告）日: 2022-04-29
• 發明（設計）人: 徐朝
• 申請（專利權）人: 平安國際智慧城市科技股份有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/25;G16H40/20
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 劉燕

1.一種數據處理方法，其特征在于，包括：

從源數據端獲取至少一種源數據，以及每種源數據的源字段特征信息，所述源字段特征信息包括源字段的數據格式；

對所述至少一種源數據進行數據校驗，若數據校驗通過，則獲取數據轉換規則；

基于所述每種源數據的源字段特征信息構建目標結構表，所述目標結構表中包括目標數據，所述目標數據的目標字段特征信息包括目標字段的數據格式；

若數據校驗通過的源數據中的指定源字段的數據格式和所述目標結構表中與所述指定源字段對應的指定目標字段的數據格式不同，則基于所述數據轉換規則對所述指定源字段的數據格式進行數據轉換，并將轉換后的指定源字段和數據校驗通過的源數據中除所述指定源字段以外的字段存儲至目標數據端的目標數據庫中。

2.根據權利要求1所述的方法，其特征在于，所述獲取數據轉換規則之前，所述方法還包括：

在目標展示界面中輸出針對所述數據轉換規則的錄入觸發控件；

響應于針對所述錄入觸發控件的控件觸發指令，獲取所述目標展示界面的目標區域中的輸入數據，基于所述輸入數據生成所述數據轉換規則。

3.根據權利要求1所述的方法，其特征在于，所述源字段特征信息還包括源數據中源字段的類型，所述目標數據的目標字段特征信息還包括目標字段的類型；

所述基于所述每種源數據的源字段特征信息構建目標結構表，包括：

從所述至少一種源數據中獲取目標源數據，將所述目標源數據的源字段特征信息確定為目標結構表中目標數據的目標字段特征信息，所述目標數據中目標字段的類型與所述目標源數據中源字段的類型相同，所述目標字段的數據格式與所述目標源數據中源字段的數據格式相同；或者，

從所述至少一種源數據中獲取第一源數據和第二源數據，將所述第一源數據中源字段的類型確定為目標數據中目標字段的類型，將所述第二源數據中源字段的數據格式確定為所述目標數據中目標字段的數據格式。

4.根據權利要求3所述的方法，其特征在于，所述源字段特征信息還包括用于指示源字段是否為空值的空值信息，所述目標數據的目標字段特征信息還包括用于指示目標字段是否為空值的空值信息；

所述對所述至少一種源數據進行數據校驗，包括：

對每種源數據中每個源字段的類型進行異常校驗、所述每個源字段的字段格式進行異常校驗、以及所述每個源字段的空值信息進行異常校驗；

若所述每個源字段的類型的異常校驗、所述每個源字段的數據格式的異常校驗、以及所述每個源字段的空值信息的異常校驗均指示數據校驗正常，則確定所述至少一種源數據的數據校驗通過；

若存在一個或多個源字段的類型的異常校驗、一個或多個源字段的數據格式的異常校驗、或者一個或多個源字段的空值信息的異常校驗指示數據校驗異常，則確定所述至少一種源數據的數據校驗不通過。

5.根據權利要求4所述的方法，其特征在于，若源數據中源字段的空值信息指示源字段為空值，所述對所述至少一種源數據進行數據校驗之前，所述方法還包括：

將默認數值確定為所述源數據中空值字段的數值；或者，

獲取所述源數據中空值字段的屬性特征，基于所述空值字段的屬性特征確定所述空值字段的數值，所述屬性特征包括所述空值字段的日期特征或者時間特征中的至少一種。

6.根據權利要求1-5任一項所述的方法，其特征在于，所述若數據校驗通過，則獲取數據轉換規則之后，所述方法還包括：

若數據校驗通過的源數據中的指定源字段的數據格式和所述目標結構表中與所述指定源字段對應的指定目標字段的數據格式相同，則將數據校驗通過的源數據存儲至所述目標數據端的目標數據庫中。

7.根據權利要求1-5任一項所述的方法，其特征在于，所述對所述至少一種源數據進行數據校驗之后，所述方法還包括：

若數據校驗不通過，則將數據校驗不通過的源數據存儲至所述目標數據端的異常數據庫中。