[發明專利]大數據報表導出方法及相關設備

在審

• 申請號: 202011509980.X
• 申請日: 2020-12-18
• 公開（公告）號: CN112632163A
• 公開（公告）日: 2021-04-09
• 發明（設計）人: 劉耀暉
• 申請（專利權）人: 平安普惠企業管理有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/2455
• 代理公司: 深圳市賽恩倍吉知識產權代理有限公司 44334
• 代理人: 遲珊珊

1.一種大數據報表導出方法，其特征在于，所述大數據報表導出方法包括：

檢測預設主庫中是否有日志生成，若是，則將生成的所述日志寫入與所述預設主庫對應的初始子庫中，執行所述初始子庫中的所述日志，得到與所述初始子庫對應的準實時子庫；

接收報表導出請求，從所述報表導出請求中確定待導出對象，并判斷所述待導出對象是否屬于大數據量級；

若所述待導出對象屬于大數據量級，則從所述報表導出請求中獲取時間限值；

根據所述時間限值從所述準實時子庫中確定多個目標子庫；

根據所述多個目標子庫的子庫數量將所述待導出對象劃分為多個數據組，并獲取每個數據組的起始標識及結束標識；

依據所述起始標識及所述結束標識從所述多個目標子庫中并行讀取數據，得到導出數據；

獲取與所述報表導出請求對應的預設數據表，并將所述導出數據寫入所述預設數據表中，得到目標報表。

2.如權利要求1所述的大數據報表導出方法，其特征在于，所述將所述日志寫入與所述預設主庫對應的初始子庫中包括：

獲取所述預設主庫的主庫標識，并獲取數據庫映射表；

從所述數據庫映射表中獲取與所述主庫標識對應的子庫標識；

根據所述子庫標識確定所述初始子庫，并確定所述初始子庫的初始數量；

根據所述初始數量從預設線程池中調用閑置線程，所述閑置線程的線程數量等于所述初始數量；

利用所述閑置線程將所述日志并行寫入所述初始子庫。

3.如權利要求1所述的大數據報表導出方法，其特征在于，所述執行所述初始子庫中的所述日志，得到與所述初始子庫對應的準實時子庫包括：

解析所述日志，得到所述日志的數據操作；

在所述初始子庫上執行所述數據操作，得到所述準實時子庫。

4.如權利要求1所述的大數據報表導出方法，其特征在于，所述從所述報表導出請求中確定待導出對象，并檢測所述待導出對象是否屬于大數據量級包括：

解析所述報表導出請求的報文，得到所述報文攜帶的數據信息；

從所述數據信息中獲取用于指示對象的信息作為所述待導出對象；

獲取所述待導出對象的數據量；

當所述數據量大于或者等于配置值時，確定所述待導出對象屬于所述大數據量級。

5.如權利要求4所述的大數據報表導出方法，其特征在于，所述根據所述時間限值從所述準實時子庫中確定多個目標子庫包括：

將所述數據量除以所述時間限值，得到數據處理速率；

確定所述準實時子庫的平均處理速率；

將所述數據處理速率除以所述平均處理速率，得到所述子庫數量；

從所述準實時子庫中篩選出閑置子庫，所述閑置子庫是指處于空閑狀態的準實時子庫；

根據所述子庫數量從所述閑置子庫中確定所述多個目標子庫。

6.如權利要求1所述的大數據報表導出方法，其特征在于，所述獲取與所述報表導出請求對應的預設數據表包括：

確定所述報表導出請求的觸發用戶，并確定所述觸發用戶的觸發角色；

獲取所述觸發角色的識別碼，并從配置表中獲取與所述識別碼對應的表號；

獲取與所述表號對應的數據表作為所述預設數據表。

7.如權利要求1所述的大數據報表導出方法，其特征在于，所述將所述導出數據寫入所述預設數據表中，得到目標報表包括：

確定所述導出數據在所述預設主庫中的位置；

根據所述位置依次將所述導出數據寫入所述預設數據表中，得到所述目標報表。