[發(fā)明專利]一種數(shù)據(jù)處理方法及裝置

在審

• 申請?zhí)枺?/td>: 202010434552.9
• 申請日: 2020-05-21
• 公開（公告）號: CN113704559A
• 公開（公告）日: 2021-11-26
• 發(fā)明（設(shè)計）人: 李長亮;樊駿鋒;汪美玲
• 申請（專利權(quán)）人: 北京金山數(shù)字娛樂科技有限公司
• 主分類號: G06F16/901
• 分類號: G06F16/901;G06F16/25
• 代理公司: 北京柏杉松知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11413
• 代理人: 孟維娜;項京

1.一種數(shù)據(jù)處理方法，其特征在于，所述方法包括：

獲得待處理的結(jié)構(gòu)化數(shù)據(jù)；

以所述結(jié)構(gòu)化數(shù)據(jù)的標(biāo)識為節(jié)點(diǎn)標(biāo)識、且以所述結(jié)構(gòu)化數(shù)據(jù)包含的字段值為節(jié)點(diǎn)屬性，生成每一結(jié)構(gòu)化數(shù)據(jù)所對應(yīng)節(jié)點(diǎn)的節(jié)點(diǎn)數(shù)據(jù)；

根據(jù)預(yù)設(shè)的關(guān)系字段信息，生成各個結(jié)構(gòu)化數(shù)據(jù)所對應(yīng)節(jié)點(diǎn)間的關(guān)系數(shù)據(jù)，其中，所述預(yù)設(shè)的關(guān)系字段信息包括：所述結(jié)構(gòu)化數(shù)據(jù)中存在關(guān)系的字段值、以及存在關(guān)系的字段值間的關(guān)系信息；

獲得包含所述節(jié)點(diǎn)數(shù)據(jù)以及所述關(guān)系數(shù)據(jù)的文件，并將所述文件導(dǎo)入至圖數(shù)據(jù)庫中。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)預(yù)設(shè)的關(guān)系字段信息，生成各個結(jié)構(gòu)化數(shù)據(jù)所對應(yīng)節(jié)點(diǎn)間的關(guān)系數(shù)據(jù)，包括：

確定所述節(jié)點(diǎn)屬性中包括預(yù)設(shè)的關(guān)系字段信息中的所述字段值的節(jié)點(diǎn)；

根據(jù)所述預(yù)設(shè)的關(guān)系字段信息中的所述關(guān)系信息，生成所確定節(jié)點(diǎn)間的關(guān)系數(shù)據(jù)。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲得待處理的結(jié)構(gòu)化數(shù)據(jù)，包括：

從預(yù)設(shè)的數(shù)據(jù)源中獲得結(jié)構(gòu)化數(shù)據(jù)，對所獲得的結(jié)構(gòu)化數(shù)據(jù)進(jìn)行數(shù)據(jù)清洗；

基于預(yù)設(shè)的標(biāo)識映射關(guān)系，將清洗后的結(jié)構(gòu)化數(shù)據(jù)中字段值對應(yīng)的字段標(biāo)識映射為節(jié)點(diǎn)屬性對應(yīng)的屬性標(biāo)識，將映射標(biāo)識后的結(jié)構(gòu)化數(shù)據(jù)作為待處理的結(jié)構(gòu)化數(shù)據(jù)。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述將映射標(biāo)識后的結(jié)構(gòu)化數(shù)據(jù)作為待處理的結(jié)構(gòu)化數(shù)據(jù)，包括：

按照預(yù)設(shè)的字段值格式，對映射標(biāo)識后的結(jié)構(gòu)化數(shù)據(jù)中的字段值進(jìn)行格式調(diào)整，將調(diào)整后的結(jié)構(gòu)化數(shù)據(jù)作為待處理的結(jié)構(gòu)化數(shù)據(jù)。

5.根據(jù)權(quán)利要求1-4中任一項所述的方法，其特征在于，所述獲得包含所述節(jié)點(diǎn)數(shù)據(jù)以及所述關(guān)系數(shù)據(jù)的文件，包括：

按照預(yù)設(shè)的文件格式需求，生成包含所述節(jié)點(diǎn)數(shù)據(jù)以及所述關(guān)系數(shù)據(jù)的文件，并按照預(yù)設(shè)的文件存儲需求，存儲所述文件。

6.一種數(shù)據(jù)處理裝置，其特征在于，所述裝置包括：

結(jié)構(gòu)化數(shù)據(jù)獲得模塊，用于獲得待處理的結(jié)構(gòu)化數(shù)據(jù)；

節(jié)點(diǎn)數(shù)據(jù)生成模塊，用于以所述結(jié)構(gòu)化數(shù)據(jù)的標(biāo)識為節(jié)點(diǎn)標(biāo)識、且以所述結(jié)構(gòu)化數(shù)據(jù)包含的字段值為節(jié)點(diǎn)屬性，生成每一結(jié)構(gòu)化數(shù)據(jù)所對應(yīng)節(jié)點(diǎn)的節(jié)點(diǎn)數(shù)據(jù)；

關(guān)系數(shù)據(jù)生成模塊，用于根據(jù)預(yù)設(shè)的關(guān)系字段信息，生成各個結(jié)構(gòu)化數(shù)據(jù)所對應(yīng)節(jié)點(diǎn)間的關(guān)系數(shù)據(jù)，其中，所述預(yù)設(shè)的關(guān)系字段信息包括：所述結(jié)構(gòu)化數(shù)據(jù)中存在關(guān)系的字段值、以及存在關(guān)系的字段值間的關(guān)系信息；

數(shù)據(jù)導(dǎo)入模塊，用于獲得包含所述節(jié)點(diǎn)數(shù)據(jù)以及所述關(guān)系數(shù)據(jù)的文件，并將所述文件導(dǎo)入至圖數(shù)據(jù)庫中。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述關(guān)系數(shù)據(jù)生成模塊，包括：

節(jié)點(diǎn)確定子模塊，用于確定所述節(jié)點(diǎn)屬性中包括預(yù)設(shè)的關(guān)系字段信息中的所述字段值的節(jié)點(diǎn)；

關(guān)系數(shù)據(jù)生成子模塊，用于根據(jù)所述預(yù)設(shè)的關(guān)系字段信息中的所述關(guān)系信息，生成所確定節(jié)點(diǎn)間的關(guān)系數(shù)據(jù)。

8.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述結(jié)構(gòu)化數(shù)據(jù)獲得模塊，包括：

數(shù)據(jù)清洗子模塊，用于從預(yù)設(shè)的數(shù)據(jù)源中獲得結(jié)構(gòu)化數(shù)據(jù)，對所獲得的結(jié)構(gòu)化數(shù)據(jù)進(jìn)行數(shù)據(jù)清洗；

標(biāo)識映射子模塊，用于基于預(yù)設(shè)的標(biāo)識映射關(guān)系，將清洗后的結(jié)構(gòu)化數(shù)據(jù)中字段值對應(yīng)的字段標(biāo)識映射為節(jié)點(diǎn)屬性對應(yīng)的屬性標(biāo)識，將映射標(biāo)識后的結(jié)構(gòu)化數(shù)據(jù)作為待處理的結(jié)構(gòu)化數(shù)據(jù)。

9.根據(jù)權(quán)利要求8所述的裝置，其特征在于，

所述標(biāo)識映射子模塊據(jù)，具體用于基于預(yù)設(shè)的標(biāo)識映射關(guān)系，將清洗后的結(jié)構(gòu)化數(shù)據(jù)中字段值對應(yīng)的字段標(biāo)識映射為節(jié)點(diǎn)屬性對應(yīng)的屬性標(biāo)識，按照預(yù)設(shè)的字段值格式，對映射標(biāo)識后的結(jié)構(gòu)化數(shù)據(jù)中的字段值進(jìn)行格式調(diào)整，將調(diào)整后的結(jié)構(gòu)化數(shù)據(jù)作為待處理的結(jié)構(gòu)化數(shù)據(jù)。