[發(fā)明專利]一種數(shù)據(jù)處理方法、裝置和電子設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 202011272746.X
• 申請(qǐng)日: 2020-11-13
• 公開（公告）號(hào): CN112380214A
• 公開（公告）日: 2021-02-19
• 發(fā)明（設(shè)計(jì)）人: 劉偉;李曉宇;周宇;張焱
• 申請(qǐng)（專利權(quán)）人: 北京神州泰岳智能數(shù)據(jù)技術(shù)有限公司
• 主分類號(hào): G06F16/22
• 分類號(hào): G06F16/22;G06F16/25
• 代理公司: 北京市隆安律師事務(wù)所 11323
• 代理人: 權(quán)鮮枝

1.一種數(shù)據(jù)處理方法，其特征在于，包括：

將多個(gè)第一原始字段的原始數(shù)據(jù)進(jìn)行拼接，得到拼接數(shù)據(jù)；所述第一原始字段是第一標(biāo)準(zhǔn)字段的關(guān)聯(lián)字段；

將所述拼接數(shù)據(jù)與所述第一標(biāo)準(zhǔn)字段的關(guān)聯(lián)表進(jìn)行匹配，得到匹配結(jié)果；

根據(jù)所述匹配結(jié)果確定所述第一標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)。

2.如權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述第一標(biāo)準(zhǔn)字段的關(guān)聯(lián)表有多個(gè)，所述將所述拼接數(shù)據(jù)與第一標(biāo)準(zhǔn)字段的關(guān)聯(lián)表進(jìn)行匹配，得到匹配結(jié)果包括：

按照所述關(guān)聯(lián)表的匹配優(yōu)先級(jí)，依次將所述拼接數(shù)據(jù)與各關(guān)聯(lián)表進(jìn)行匹配；所述關(guān)聯(lián)表的各項(xiàng)分別記錄有第一標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)；

在得到匹配項(xiàng)后，停止匹配，將得到的匹配項(xiàng)作為匹配結(jié)果；

若在各關(guān)聯(lián)表中均未得到匹配項(xiàng)，則停止匹配，得到無匹配項(xiàng)的匹配結(jié)果。

3.如權(quán)利要求2所述的數(shù)據(jù)處理方法，其特征在于，所述根據(jù)所述匹配結(jié)果確定所述第一標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)包括：

若所述匹配結(jié)果為無匹配項(xiàng)，則確定所述第一標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)為空值；

所述數(shù)據(jù)處理方法還包括：

生成與所述第一標(biāo)準(zhǔn)字段對(duì)應(yīng)的錯(cuò)誤信息，以能夠根據(jù)所述錯(cuò)誤信息實(shí)現(xiàn)數(shù)據(jù)檢查。

4.如權(quán)利要求2所述的數(shù)據(jù)處理方法，其特征在于，所述根據(jù)所述匹配結(jié)果確定所述第一標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)包括：

若所述匹配結(jié)果為無匹配項(xiàng)，則利用正則表達(dá)式對(duì)與所述第一標(biāo)準(zhǔn)字段直接關(guān)聯(lián)的第一原始字段的原始數(shù)據(jù)進(jìn)行提取，得到所述第一標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)。

5.如權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)處理方法還包括：

利用正則表達(dá)式對(duì)從第二原始字段的原始數(shù)據(jù)進(jìn)行提取，得到第二標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)。

6.如權(quán)利要求1所述的數(shù)據(jù)處理方法，其特征在于，所述關(guān)聯(lián)表記錄有多組標(biāo)準(zhǔn)化數(shù)據(jù)，每組標(biāo)準(zhǔn)化數(shù)據(jù)包括所述第一標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)，以及若干個(gè)第三標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)；

所述數(shù)據(jù)處理方法還包括：

根據(jù)所述匹配結(jié)果確定第三標(biāo)準(zhǔn)字段的標(biāo)準(zhǔn)化數(shù)據(jù)。

7.如權(quán)利要求1～6中任一項(xiàng)所述的數(shù)據(jù)處理方法，其特征在于，所述數(shù)據(jù)處理方法在所有步驟前還包括：

加載標(biāo)準(zhǔn)配置文件，所述標(biāo)準(zhǔn)配置文件中記錄有標(biāo)準(zhǔn)字段與原始字段的關(guān)聯(lián)關(guān)系，以及各標(biāo)準(zhǔn)字段的關(guān)聯(lián)表。

8.如權(quán)利要求7所述的數(shù)據(jù)處理方法，其特征在于，所述標(biāo)準(zhǔn)配置文件還記錄有原始數(shù)據(jù)文件的存儲(chǔ)路徑和結(jié)果文件的存儲(chǔ)路徑，所述數(shù)據(jù)處理方法還包括：

根據(jù)所述原始數(shù)據(jù)文件的存儲(chǔ)路徑讀取原始字段的原始數(shù)據(jù)；

將得到的標(biāo)準(zhǔn)化數(shù)據(jù)寫入到所述結(jié)果文件的相應(yīng)標(biāo)準(zhǔn)化字段中。

9.一種數(shù)據(jù)處理裝置，其特征在于，所述數(shù)據(jù)處理裝置用于實(shí)現(xiàn)權(quán)利要求1～8之任一所述數(shù)據(jù)處理方法。

10.一種電子設(shè)備，包括：

處理器；以及

被安排成存儲(chǔ)計(jì)算機(jī)可執(zhí)行指令的存儲(chǔ)器，所述可執(zhí)行指令在被執(zhí)行時(shí)使所述處理器執(zhí)行所述權(quán)利要求1～8之任一所述數(shù)據(jù)處理方法。