[發(fā)明專利]一種數(shù)據(jù)處理的方法及裝置

在審

• 申請?zhí)枺?/td>: 202310631546.6
• 申請日: 2023-05-31
• 公開（公告）號: CN116340411A
• 公開（公告）日: 2023-06-27
• 發(fā)明（設(shè)計）人: 劉小霞;朱海洋;高楊斌;胡健;朱時俊
• 申請（專利權(quán)）人: 物產(chǎn)中大數(shù)字科技有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/22;G06F16/23;G06F16/242;G06F16/28
• 代理公司: 北京億騰知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11309
• 代理人: 陳瀟

1.一種數(shù)據(jù)處理方法，所述方法包括：

響應(yīng)于用戶新建工作流的操作，輸出工作流編輯界面；

在所述工作流編輯界面中建立源數(shù)據(jù)表；所述源數(shù)據(jù)表中的數(shù)據(jù)來自第一數(shù)據(jù)庫系統(tǒng)；

在所述工作流編輯界面中新建對應(yīng)于第二數(shù)據(jù)庫系統(tǒng)的空數(shù)據(jù)表；

確定所述源數(shù)據(jù)表和目標(biāo)數(shù)據(jù)表的轉(zhuǎn)換關(guān)系；

響應(yīng)于用戶在所述工作流編輯界面中的觸發(fā)操作，基于所述源數(shù)據(jù)表、所述空數(shù)據(jù)表和所述轉(zhuǎn)換關(guān)系，生成目標(biāo)工作流；

執(zhí)行所述目標(biāo)工作流，將所述源數(shù)據(jù)表進(jìn)行轉(zhuǎn)換之后更新至所述空數(shù)據(jù)表中，得到所述目標(biāo)數(shù)據(jù)表；

對所述目標(biāo)數(shù)據(jù)表進(jìn)行以下更新，以在所述第二數(shù)據(jù)庫系統(tǒng)中對更新之后的目標(biāo)數(shù)據(jù)表進(jìn)行處理：確定所述目標(biāo)數(shù)據(jù)表中的目標(biāo)列，將所述目標(biāo)列中的數(shù)據(jù)對應(yīng)的字符集類型更新成預(yù)設(shè)字符集類型，以及將所述目標(biāo)數(shù)據(jù)表中指定數(shù)據(jù)的格式更新為目標(biāo)格式。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述在所述工作流編輯界面中建立源數(shù)據(jù)表，包括：

通過所述工作流編輯界面，在預(yù)先搭建的所述第一數(shù)據(jù)庫系統(tǒng)的數(shù)據(jù)庫環(huán)境下，新建源數(shù)據(jù)庫，并在所述源數(shù)據(jù)庫中建立源數(shù)據(jù)倉；

向所述源數(shù)據(jù)倉中導(dǎo)入所述第一數(shù)據(jù)庫系統(tǒng)中的指定數(shù)據(jù)表作為所述源數(shù)據(jù)表，并向所述源數(shù)據(jù)倉中添加所述源數(shù)據(jù)表的表格視圖。

3.根據(jù)權(quán)利要求1所述的方法，其中，所述在所述工作流編輯界面中新建對應(yīng)于第二數(shù)據(jù)庫系統(tǒng)的空數(shù)據(jù)表，包括：

通過所述工作流編輯界面，在預(yù)先搭建的所述第二數(shù)據(jù)庫系統(tǒng)的數(shù)據(jù)庫環(huán)境下，新建目標(biāo)數(shù)據(jù)庫，并在所述目標(biāo)數(shù)據(jù)庫中建立目標(biāo)數(shù)據(jù)倉；

在所述目標(biāo)數(shù)據(jù)倉中創(chuàng)建所述源數(shù)據(jù)表對應(yīng)的空數(shù)據(jù)表，并向所述目標(biāo)數(shù)據(jù)倉中添加所述空數(shù)據(jù)表的表格視圖。

4.根據(jù)權(quán)利要求1所述的方法，其中，所述確定所述源數(shù)據(jù)表和目標(biāo)數(shù)據(jù)表的轉(zhuǎn)換關(guān)系，包括：

利用SQL查詢語句確定所述第一數(shù)據(jù)庫系統(tǒng)和所述第二數(shù)據(jù)庫系統(tǒng)中數(shù)據(jù)集、表格、列和主關(guān)鍵字之間的對應(yīng)關(guān)系；

基于所述第一數(shù)據(jù)庫系統(tǒng)和所述第二數(shù)據(jù)庫系統(tǒng)中數(shù)據(jù)集、表格、列和主關(guān)鍵字之間的對應(yīng)關(guān)系，確定所述源數(shù)據(jù)表和目標(biāo)數(shù)據(jù)表的轉(zhuǎn)換關(guān)系。

5.根據(jù)權(quán)利要求1所述的方法，其中，所述確定所述目標(biāo)數(shù)據(jù)表中的目標(biāo)列，包括：將預(yù)設(shè)字段對應(yīng)的列確定為所述目標(biāo)數(shù)據(jù)表中的目標(biāo)列。

6.根據(jù)權(quán)利要求1所述的方法，其中，所述將所述目標(biāo)列中的數(shù)據(jù)對應(yīng)的字符集類型更新成預(yù)設(shè)字符集類型，包括：

在所述目標(biāo)數(shù)據(jù)表中新建臨時列；

將所述目標(biāo)列中的數(shù)據(jù)更新至所述臨時列中，并清空所述目標(biāo)列的數(shù)據(jù)；

將清空之后的目標(biāo)列中的字符集類型修改為預(yù)設(shè)字符集類型；

將更新至所述臨時列中的數(shù)據(jù)遷移回所述目標(biāo)列中。

7.一種數(shù)據(jù)處理裝置，所述裝置包括：

輸出模塊，用于響應(yīng)于用戶新建工作流的操作，輸出工作流編輯界面；

第一建立模塊，用于在所述工作流編輯界面中建立源數(shù)據(jù)表；所述源數(shù)據(jù)表中的數(shù)據(jù)來自第一數(shù)據(jù)庫系統(tǒng)；

第二建立模塊，用于在所述工作流編輯界面中新建對應(yīng)于第二數(shù)據(jù)庫系統(tǒng)的空數(shù)據(jù)表；

確定模塊，用于確定所述源數(shù)據(jù)表和目標(biāo)數(shù)據(jù)表的轉(zhuǎn)換關(guān)系；

生成模塊，用于響應(yīng)于用戶在所述工作流編輯界面中的觸發(fā)操作，基于所述源數(shù)據(jù)表、所述空數(shù)據(jù)表和所述轉(zhuǎn)換關(guān)系，生成目標(biāo)工作流；

執(zhí)行模塊，用于執(zhí)行所述目標(biāo)工作流，將所述源數(shù)據(jù)表進(jìn)行轉(zhuǎn)換之后更新至所述空數(shù)據(jù)表中，得到所述目標(biāo)數(shù)據(jù)表；

更新模塊，用于對所述目標(biāo)數(shù)據(jù)表進(jìn)行以下更新，以在所述第二數(shù)據(jù)庫系統(tǒng)中對更新之后的目標(biāo)數(shù)據(jù)表進(jìn)行處理：確定所述目標(biāo)數(shù)據(jù)表中的目標(biāo)列，將所述目標(biāo)列中的數(shù)據(jù)對應(yīng)的字符集類型更新成預(yù)設(shè)字符集類型，以及將所述目標(biāo)數(shù)據(jù)表中指定數(shù)據(jù)的格式更新為目標(biāo)格式。