[發(fā)明專利]數(shù)據(jù)存儲方法、裝置、電子設(shè)備及存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202010916524.0
• 申請日: 2020-09-03
• 公開（公告）號: CN111985194A
• 公開（公告）日: 2020-11-24
• 發(fā)明（設(shè)計(jì)）人: 唐應(yīng)泉
• 申請（專利權(quán)）人: 深圳壹賬通智能科技有限公司
• 主分類號: G06F40/174
• 分類號: G06F40/174;G06F16/22
• 代理公司: 深圳市沃德知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44347
• 代理人: 高杰;于志光

本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，揭露了一種數(shù)據(jù)存儲方法，包括：獲取待存儲數(shù)據(jù)集及對應(yīng)的數(shù)據(jù)表集，對所述數(shù)據(jù)表集進(jìn)行主從表分類，得到主數(shù)據(jù)表集和從數(shù)據(jù)表集；計(jì)算主數(shù)據(jù)表集中每一個(gè)主數(shù)據(jù)表的數(shù)據(jù)飽和度，選取數(shù)據(jù)飽和度大于預(yù)設(shè)閾值的主數(shù)據(jù)表，得到目標(biāo)主數(shù)據(jù)表集；對目標(biāo)主數(shù)據(jù)表集中的目標(biāo)主數(shù)據(jù)表進(jìn)行合并，生成一個(gè)或多個(gè)主數(shù)據(jù)寬表；對從數(shù)據(jù)表集中的從數(shù)據(jù)表進(jìn)行合并，生成一個(gè)或多個(gè)從數(shù)據(jù)寬表；根據(jù)主數(shù)據(jù)寬表和從數(shù)據(jù)寬表，執(zhí)行待存儲數(shù)據(jù)集的數(shù)據(jù)存儲。本發(fā)明還提出一種數(shù)據(jù)存儲裝置、電子設(shè)備以及存儲介質(zhì)。此外，本發(fā)明還涉及區(qū)塊鏈技術(shù)，所述主數(shù)據(jù)寬表及從數(shù)據(jù)寬表可存儲于區(qū)塊鏈中。本發(fā)明可以提高數(shù)據(jù)存儲的存儲效率。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，尤其涉及一種數(shù)據(jù)存儲方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)。

背景技術(shù)

隨著大數(shù)據(jù)的日益發(fā)展，如何進(jìn)行高效的數(shù)據(jù)存儲愈漸重要，目前在數(shù)據(jù)存儲時(shí)，通常根據(jù)數(shù)據(jù)邏輯上配置T₁，T₂，T₃，T₄，T₅，T₆.......T_n張數(shù)據(jù)表，根據(jù)配置的數(shù)據(jù)表存儲系統(tǒng)傳輸?shù)膶?yīng)數(shù)據(jù)，但是，這種方法在執(zhí)行數(shù)據(jù)存儲時(shí)存在如下弊端：需要對每張數(shù)據(jù)表進(jìn)行至少一次數(shù)據(jù)存儲操作，由于涉及操作的數(shù)據(jù)表數(shù)量較多，往往要花很多時(shí)間才能完成一條完整數(shù)據(jù)的存儲，導(dǎo)致數(shù)據(jù)存儲的存儲效率較低。

發(fā)明內(nèi)容

本發(fā)明提供一種數(shù)據(jù)存儲方法、裝置、電子設(shè)備及計(jì)算機(jī)可讀存儲介質(zhì)，其主要目的在于提高數(shù)據(jù)存儲的存儲效率。

為實(shí)現(xiàn)上述目的，本發(fā)明提供的一種數(shù)據(jù)存儲方法，包括：

獲取待存儲數(shù)據(jù)集及對應(yīng)的數(shù)據(jù)表集，對所述數(shù)據(jù)表集進(jìn)行主從表分類，得到主數(shù)據(jù)表集和從數(shù)據(jù)表集；

計(jì)算所述主數(shù)據(jù)表集中每一個(gè)主數(shù)據(jù)表的數(shù)據(jù)飽和度，選取數(shù)據(jù)飽和度大于預(yù)設(shè)閾值的主數(shù)據(jù)表，得到目標(biāo)主數(shù)據(jù)表集；

對所述目標(biāo)主數(shù)據(jù)表集中的目標(biāo)主數(shù)據(jù)表進(jìn)行合并，生成一個(gè)或多個(gè)主數(shù)據(jù)寬表；

對所述從數(shù)據(jù)表集中的從數(shù)據(jù)表進(jìn)行合并，生成一個(gè)或多個(gè)從數(shù)據(jù)寬表；

根據(jù)所述主數(shù)據(jù)寬表和從數(shù)據(jù)寬表，執(zhí)行所述待存儲數(shù)據(jù)集的數(shù)據(jù)存儲。

可選地，所述對所述數(shù)據(jù)表集進(jìn)行主從表分類，得到主數(shù)據(jù)表集和從數(shù)據(jù)表集，包括：

獲取所述數(shù)據(jù)表集中每一個(gè)數(shù)據(jù)表的所屬數(shù)據(jù)形態(tài)；

基于所述數(shù)據(jù)形態(tài)，識別出所述數(shù)據(jù)表集中數(shù)據(jù)表之間的關(guān)聯(lián)關(guān)系；

根據(jù)所述關(guān)聯(lián)關(guān)系，執(zhí)行所述數(shù)據(jù)表集的主從表劃分，生成所述主數(shù)據(jù)表集和所述從數(shù)據(jù)表集。

可選地，所述計(jì)算所述主數(shù)據(jù)表集中每一個(gè)主數(shù)據(jù)表的數(shù)據(jù)飽和度，包括：

獲取所述主數(shù)據(jù)表中所有的字段；

獲取每一個(gè)所述字段所包含的存儲數(shù)據(jù)集；

若識別出所述存儲數(shù)據(jù)集中存在非法存儲數(shù)據(jù)，則將所述非法存儲數(shù)據(jù)從所述存儲數(shù)據(jù)集中篩除；

利用預(yù)設(shè)飽和度計(jì)算公式計(jì)算所述存儲數(shù)據(jù)集的飽和度，得到對應(yīng)的字段飽和度，根據(jù)所述字段飽和度，計(jì)算對應(yīng)主數(shù)據(jù)表的數(shù)據(jù)飽和度。

可選地，所述預(yù)設(shè)飽和度計(jì)算公式包括：

P＝n/m*100％

其中，P表示存儲數(shù)據(jù)集的飽和度，n表示存儲數(shù)據(jù)集中存儲數(shù)據(jù)的數(shù)量，m表示主數(shù)據(jù)表中字段所包含存儲數(shù)據(jù)的總數(shù)量。

可選地，所述對所述目標(biāo)主數(shù)據(jù)表集中的目標(biāo)主數(shù)據(jù)表進(jìn)行合并，包括：