[發明專利]數據處理邏輯的冗余檢測方法、裝置、設備及存儲介質

在審

• 申請號: 202010578566.8
• 申請日: 2020-06-23
• 公開（公告）號: CN111752766A
• 公開（公告）日: 2020-10-09
• 發明（設計）人: 楊軒;魏建鐘;劉強
• 申請（專利權）人: 北京三快在線科技有限公司
• 主分類號: G06F11/16
• 分類號: G06F11/16
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 唐述燦

1.一種數據處理邏輯的冗余檢測方法，其特征在于，應用于計算機設備中，所述方法包括：

獲取目標數據倉庫中的至少一個數據處理邏輯；

對于所述至少一個數據處理邏輯中的第一數據處理邏輯和第二數據處理邏輯，確定所述第一數據處理邏輯和所述第二數據處理邏輯之間的冗余度；

響應于所述冗余度滿足條件，確定所述第一數據處理邏輯和所述第二數據處理邏輯為重復處理邏輯；

根據所述重復處理邏輯，生成冗余邏輯檢測結果，所述冗余邏輯檢測結果用于指示產生冗余的原因。

2.根據權利要求1所述的方法，其特征在于，所述確定所述第一數據處理邏輯和所述第二數據處理邏輯之間的冗余度，包括：

獲取所述第一數據處理邏輯的結構存儲和所述第二數據處理邏輯的結構存儲，所述結構存儲包括引用表字段解析存儲和引用表關聯解析存儲；

根據所述引用表字段解析存儲，確定所述第一數據處理邏輯和所述第二數據處理邏輯的引用表的重復引用字段；

根據所述引用表關聯解析存儲，確定所述第一數據處理邏輯和所述第二數據處理邏輯的引用表的重復關聯表；

確定所述重復引用字段的重復度和所述重復關聯表的重復度；

根據所述重復引用字段的重復度和所述重復關聯表的重復度，計算所述冗余度。

3.根據權利要求2所述的方法，其特征在于，所述確定所述重復引用字段的重復度和所述重復關聯表的重復度，包括：

確定所述重復引用字段的重復次數以及所述重復關聯表的重復次數；

根據所述重復引用字段的重復次數、所述重復引用字段所在的引用表的表系數、以及所述重復引用字段所在的引用表的表分類系數，確定所述重復引用字段的重復度；

根據所述重復關聯表的重復次數、所述重復關聯表的表系數、以及所述重復關聯表的表分類系數，確定所述重復關聯表的重復度；

其中，所述表分類系數包括事實表分類系數和維度表分類系數。

4.根據權利要求3所述的方法，其特征在于，所述方法還包括：

獲取外部數據，所述外部數據包括所述第一數據處理邏輯和所述第二數據處理邏輯的引用表的類型和存儲空間，所述引用表的類型包括事實表和維度表；

根據所述目標數據倉庫的事實表的總存儲空間，以及所述目標數據倉庫的引用表的總存儲空間，確定事實表分類系數；

根據所述目標數據倉庫的維度表的總存儲空間，以及所述目標數據倉庫的引用表的總存儲空間，確定維度表分類系數；

對于所述第一數據處理邏輯和所述第二數據處理邏輯的第i個引用表，根據所述第i個引用表的存儲空間，以及所述第i個引用表的類型下引用表的總存儲空間，確定所述第i個引用表的表系數，所述i為正整數。

5.根據權利要求1所述的方法，其特征在于，所述冗余邏輯檢測結果包括：所述重復處理邏輯以及所述重復處理邏輯之間的冗余度。

6.根據權利要求1至5任一項所述的方法，其特征在于，所述獲取目標數據倉庫中的至少一個數據處理邏輯之后，還包括：

根據所述至少一個數據處理邏輯的使用時間，確定第一類數據處理邏輯和第二類數據處理邏輯，其中，所述第一類數據處理邏輯是指必要存在的數據處理邏輯，所述第二類數據處理邏輯是指非必要存在的數據處理邏輯，所述第一數據處理邏輯和所述第二數據處理邏輯屬于所述第一類數據處理邏輯；

其中，所述冗余邏輯檢測結果還包括：所述第二類數據處理邏輯以及所述第二類數據處理邏輯的使用時間。

7.根據權利要求6所述的方法，其特征在于，所述使用時間為最后一次使用的時間；

所述根據所述至少一個數據處理邏輯的使用時間，確定第一類數據處理邏輯和第二類數據處理邏輯，包括：

對于所述至少一個數據處理邏輯中的第k個數據處理邏輯，確定所述第k個數據處理邏輯的使用時間與當前時間之間的差值，所述k為正整數；

響應于所述差值小于目標閾值，確定所述第k個數據處理邏輯為所述第一類數據處理邏輯；

響應于所述差值大于或等于所述目標閾值，確定所述第k個數據處理邏輯為所述第二類數據處理邏輯。