[發(fā)明專利]基于大數(shù)據(jù)的數(shù)據(jù)處理方法、裝置、設(shè)備及可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110380430.0
• 申請日: 2021-04-08
• 公開（公告）號: CN113076317A
• 公開（公告）日: 2021-07-06
• 發(fā)明（設(shè)計(jì)）人: 周中和;陳婷;吳三平;王宗澤
• 申請（專利權(quán)）人: 深圳前海微眾銀行股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/2453
• 代理公司: 深圳市世紀(jì)恒程知識產(chǎn)權(quán)代理事務(wù)所 44287
• 代理人: 張志江

1.一種基于大數(shù)據(jù)的數(shù)據(jù)處理方法，其特征在于，所述基于大數(shù)據(jù)的數(shù)據(jù)處理方法包括以下步驟：

在檢測到包含數(shù)據(jù)主體的明細(xì)主鍵組件被選擇時(shí)，獲取所述明細(xì)主鍵組件對應(yīng)的明細(xì)主鍵物理表；

獲取選擇的維度組件和指標(biāo)組件，并獲取所述維度組件對應(yīng)的維度物理表，以及獲取所述指標(biāo)組件對應(yīng)的指標(biāo)物理表；

將所述明細(xì)主鍵物理表與所述維度物理表進(jìn)行左關(guān)聯(lián)，以及將所述明細(xì)主鍵物理表與所述指標(biāo)物理表進(jìn)行左關(guān)聯(lián)，生成明細(xì)數(shù)據(jù)；

基于所述明細(xì)數(shù)據(jù)，生成數(shù)據(jù)寬表，以基于所述數(shù)據(jù)寬表進(jìn)行數(shù)據(jù)處理。

2.如權(quán)利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)處理方法，其特征在于，所述基于所述明細(xì)數(shù)據(jù)，生成數(shù)據(jù)寬表的步驟包括：

將所述明細(xì)數(shù)據(jù)按照維度進(jìn)行分組，得到分組數(shù)據(jù)；或，

將所述明細(xì)數(shù)據(jù)按照指標(biāo)進(jìn)行分組，得到分組數(shù)據(jù)；

將所述分組數(shù)據(jù)插入到寬表的物理表中，得到數(shù)據(jù)寬表。

3.如權(quán)利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)處理方法，其特征在于，所述在檢測到包含數(shù)據(jù)主體的明細(xì)主鍵組件被選擇時(shí)，獲取所述明細(xì)主鍵組件對應(yīng)的明細(xì)主鍵物理表的步驟之后，還包括：

將所述明細(xì)主鍵物理表的主鍵進(jìn)行關(guān)聯(lián)擴(kuò)展，以使所述主鍵包含多個(gè)主鍵字段。

4.如權(quán)利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)處理方法，其特征在于，所述在檢測到包含數(shù)據(jù)主體的明細(xì)主鍵組件被選擇時(shí)，獲取所述明細(xì)主鍵組件對應(yīng)的明細(xì)主鍵物理表的步驟之前，還包括：

獲取第一字段定義，其中，所述第一字段定義為基于構(gòu)建明細(xì)主鍵組件的業(yè)務(wù)需求，提取對應(yīng)的業(yè)務(wù)明細(xì)表的字段得到，所述第一字段定義包括主鍵字段、維度字段、指標(biāo)字段和日期分區(qū)字段；

基于所述第一字段定義，構(gòu)建明細(xì)主鍵物理表；

基于所述第一字段定義及所述明細(xì)主鍵物理表，構(gòu)建明細(xì)主鍵組件，以供基于所述明細(xì)主鍵組件與其他組件進(jìn)行組合生成數(shù)據(jù)寬表。

5.如權(quán)利要求4所述的基于大數(shù)據(jù)的數(shù)據(jù)處理方法，其特征在于，所述基于所述第一字段定義，構(gòu)建明細(xì)主鍵物理表的步驟之后，還包括：

在初始化時(shí)，獲取第一口徑代碼，其中，所述第一口徑代碼為基于構(gòu)建明細(xì)主鍵組件的業(yè)務(wù)需求確定的代碼；

基于所述第一口徑代碼，生成所述明細(xì)主鍵物理表的數(shù)據(jù)；

其中，所述基于所述第一字段定義及所述明細(xì)主鍵物理表，構(gòu)建明細(xì)主鍵組件的步驟包括：

基于所述第一字段定義、所述明細(xì)主鍵物理表及所述第一口徑代碼，構(gòu)建明細(xì)主鍵組件。

6.如權(quán)利要求1所述的基于大數(shù)據(jù)的數(shù)據(jù)處理方法，其特征在于，所述在檢測到包含數(shù)據(jù)主體的明細(xì)主鍵組件被選擇時(shí)，獲取所述明細(xì)主鍵組件對應(yīng)的明細(xì)主鍵物理表的步驟之前，還包括：

獲取第二字段定義，其中，所述第二字段定義為基于構(gòu)建維度組件的業(yè)務(wù)需求確定得到，所述第二字段定義包括主鍵字段、維度字段和日期分區(qū)字段；

基于所述第二字段定義，構(gòu)建維度物理表；

基于所述第二字段定義及所述維度物理表，構(gòu)建維度組件，以供基于所述維度組件與其他組件進(jìn)行組合生成數(shù)據(jù)寬表。

7.如權(quán)利要求6所述的基于大數(shù)據(jù)的數(shù)據(jù)處理方法，其特征在于，所述基于所述第二字段定義，構(gòu)建維度物理表的步驟之后，還包括：

在初始化時(shí)，獲取第二口徑代碼，其中，所述第二口徑代碼為基于構(gòu)建維度組件的業(yè)務(wù)需求確定的代碼；

基于所述第二口徑代碼，生成所述維度物理表的數(shù)據(jù)；

其中，所述基于所述第二字段定義及所述維度物理表，構(gòu)建維度組件的步驟包括：

基于所述第二字段定義、所述維度物理表及所述第二口徑代碼，構(gòu)建維度組件。