[發明專利]數據處理方法及裝置、電子設備和計算機可讀存儲介質

在審

• 申請號: 202110542874.X
• 申請日: 2021-05-18
• 公開（公告）號: CN113515374A
• 公開（公告）日: 2021-10-19
• 發明（設計）人: 解森茂;李青;李曉明;張舜熙
• 申請（專利權）人: 中國工商銀行股份有限公司
• 主分類號: G06F9/50
• 分類號: G06F9/50;G06F9/54;G06F16/2453;G06F16/25;G06Q40/04;G06Q40/00
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 吳夢圓

本公開提供了一種數據處理方法及裝置、電子設備和計算機可讀存儲介質，本公開可用于大數據技術領域，也可用于金融技術領域。上述數據處理方法，包括：在第T日的第一預設時間段內獲取預處理結果數據，其中預處理結果數據為在第一處理系統中對截止第T?1日的系統交易日志數據處理獲得的數據，且預處理結果數據包括第一類別數據、第二類別數據、以及第三類別數據；在第T日按照第二預設時間間隔，多次獲取增量基礎數據，其中增量基礎數據用于計算第T日的不可預計損益發生額；以及根據預處理結果數據和多個增量基礎數據，計算目標損益額，其中目標損益額為截止第T日的日終損益余額。

技術領域

本公開涉及大數據技術領域，更具體地，涉及一種數據處理方法及裝置、電子設備、計算機可讀存儲介質和計算機程序產品。

背景技術

金融機構中，其核心業務的處理依賴于IBM主機系統。

隨著金融機構交易體量的不斷增大，以及主機高昂的成本，發明人發現相關技術中至少存在如下問題：單純依靠主機系統來處理業務已經無法滿足日常業務需要。

發明內容

有鑒于此，本公開提供了一種數據處理方法及裝置、電子設備、計算機可讀存儲介質和計算機程序產品。

本公開的一個方面提供了一種數據處理方法，包括：

在第T日的第一預設時間段內獲取預處理結果數據，其中預處理結果數據為在第一處理系統中對截止第T-1日的系統交易日志數據處理獲得的數據，且預處理結果數據包括第一類別數據、第二類別數據、以及第三類別數據，第一類別數據為用于表征截止第T-1日的日終損益余額的數據、第二類別數據為用于表征第T日的可預計損益發生額的數據、第三類別數據為用于表征截止第T-1日的外匯買賣余額的數據；

在第T日按照第二預設時間間隔，多次獲取增量基礎數據，其中增量基礎數據用于計算第T日的不可預計損益發生額；以及

根據預處理結果數據和多個增量基礎數據，計算目標損益額，其中目標損益額為截止第T日的日終損益余額。

根據本公開的實施例，其中，預處理結果數據被預先存儲在數據傳輸平臺中；獲取預處理結果數據包括：從數據傳輸平臺中獲取預處理結果數據。

根據本公開的實施例，其中，增量基礎數據被預先存儲在分布式消息流平臺中；獲取增量基礎數據包括：從分布式消息流平臺中獲取增量基礎數據。

根據本公開的實施例，其中，根據預處理結果數據和多個增量基礎數據，計算目標損益額包括：利用調度系統建立多個用于計算目標損益額的任務線程；以及采用多任務線程并行的方式，根據預處理結果數據和多個增量基礎數據，計算目標損益額。

根據本公開的實施例，其中，根據預處理結果數據和多個增量基礎數據，計算目標損益額包括：

獲取多個待關聯數據表，其中待關聯數據表中存儲有預處理結果數據或增量基礎數據；

將多個待關聯數據表進行關聯，以獲取關聯數據；

根據關聯數據，計算目標損益額。

根據本公開的實施例，其中將多個待關聯數據表進行關聯包括：采用第一關聯方法將多個待關聯數據表中的第一分類數據表進行關聯；采用第二關聯方法將多個待關聯數據表中的第二分類數據表進行關聯；其中第一分類數據表的數據量大于第二分類數據表的數據量，第一分類數據表與其他待關聯數據表關聯的次數少于第二分類數據表與其他待關聯數據表關聯的次數。

根據本公開的實施例，其中，采用第二關聯方法將多個待關聯數據表中的第二分類數據表進行關聯包括：在第二分類數據表中選取驅動表，其中驅動表采用關聯主鍵分布均勻的數據表；以及將驅動表與第二分類數據表中的其他數據表關聯。