[發(fā)明專利]業(yè)務(wù)表的批量處理方法及裝置、非易失性存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110033336.8
• 申請(qǐng)日: 2021-01-11
• 公開(kāi)（公告）號(hào): CN112835932A
• 公開(kāi)（公告）日: 2021-05-25
• 發(fā)明（設(shè)計(jì)）人: 趙成文;陳震宇;劉國(guó)華
• 申請(qǐng)（專利權(quán)）人: 中國(guó)郵政儲(chǔ)蓄銀行股份有限公司
• 主分類號(hào): G06F16/2455
• 分類號(hào): G06F16/2455;G06F16/2453
• 代理公司: 北京康信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 周春枚

本發(fā)明公開(kāi)了一種業(yè)務(wù)表的批量處理方法及裝置、非易失性存儲(chǔ)介質(zhì)。其中，該方法包括：響應(yīng)于接收到的批量處理請(qǐng)求，獲取多個(gè)待批量處理業(yè)務(wù)表；確定上述多個(gè)待批量處理業(yè)務(wù)表之間的基礎(chǔ)關(guān)聯(lián)關(guān)系；確定每個(gè)待批量處理業(yè)務(wù)表的關(guān)聯(lián)需求邏輯和關(guān)聯(lián)取數(shù)邏輯，其中，基于預(yù)先確定的不同關(guān)聯(lián)需求確定上述關(guān)聯(lián)需求邏輯，基于上述待批量處理業(yè)務(wù)表對(duì)應(yīng)的不同種類接口，確定不同的上述關(guān)聯(lián)取數(shù)邏輯；基于上述基礎(chǔ)關(guān)聯(lián)關(guān)系、上述關(guān)聯(lián)需求邏輯和上述關(guān)聯(lián)取數(shù)邏輯，對(duì)上述多個(gè)待批量處理業(yè)務(wù)表進(jìn)行批量關(guān)聯(lián)處理。本發(fā)明解決了現(xiàn)有技術(shù)中在批量處理業(yè)務(wù)表時(shí)，同類型表需反復(fù)關(guān)聯(lián)多次，消耗時(shí)間長(zhǎng)且資源占用率高的技術(shù)問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，具體而言，涉及一種業(yè)務(wù)表的批量處理方法及裝置、非易失性存儲(chǔ)介質(zhì)。

背景技術(shù)

圖1是根據(jù)現(xiàn)有技術(shù)的一種傳統(tǒng)的業(yè)務(wù)表的批量處理示意圖，如圖1所示，目前多表關(guān)聯(lián)方案多使用嵌套查詢(在一個(gè)SELECT語(yǔ)句的WHERE子句或HAVING子句中嵌套另一個(gè)SELECT語(yǔ)句的查詢)、SQL腳本串行執(zhí)行SQL逐層加工、存儲(chǔ)過(guò)程等方式實(shí)現(xiàn)，在批量處理海量數(shù)據(jù)時(shí)，同類型表需反復(fù)關(guān)聯(lián)多次，會(huì)消耗大量的時(shí)間，并對(duì)CPU和內(nèi)存造成巨的壓力。

但是，在數(shù)據(jù)時(shí)效性要求較高時(shí)，簡(jiǎn)單的函數(shù)或語(yǔ)法優(yōu)化批量關(guān)聯(lián)次數(shù)較多，無(wú)法實(shí)現(xiàn)縮短SQL任務(wù)執(zhí)行時(shí)間同時(shí)有效的降低資源占用率，即現(xiàn)有的多表關(guān)聯(lián)方案已無(wú)法滿足用戶需求。

針對(duì)上述的問(wèn)題，目前尚未提出有效的解決方案。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供了一種業(yè)務(wù)表的批量處理方法及裝置、非易失性存儲(chǔ)介質(zhì)，以至少解決現(xiàn)有技術(shù)中在批量處理業(yè)務(wù)表時(shí)，同類型表需反復(fù)關(guān)聯(lián)多次，消耗時(shí)間長(zhǎng)且資源占用率高的技術(shù)問(wèn)題。

根據(jù)本發(fā)明實(shí)施例的一個(gè)方面，提供了一種業(yè)務(wù)表的批量處理方法，包括：響應(yīng)于接收到的批量處理請(qǐng)求，獲取多個(gè)待批量處理業(yè)務(wù)表；確定上述多個(gè)待批量處理業(yè)務(wù)表之間的基礎(chǔ)關(guān)聯(lián)關(guān)系；確定每個(gè)待批量處理業(yè)務(wù)表的關(guān)聯(lián)需求邏輯和關(guān)聯(lián)取數(shù)邏輯，其中，基于預(yù)先確定的不同關(guān)聯(lián)需求確定上述關(guān)聯(lián)需求邏輯，基于上述待批量處理業(yè)務(wù)表對(duì)應(yīng)的不同種類接口，確定不同的上述關(guān)聯(lián)取數(shù)邏輯；基于上述基礎(chǔ)關(guān)聯(lián)關(guān)系、上述關(guān)聯(lián)需求邏輯和上述關(guān)聯(lián)取數(shù)邏輯，對(duì)上述多個(gè)待批量處理業(yè)務(wù)表進(jìn)行批量關(guān)聯(lián)處理。

可選的，確定上述多個(gè)待批量處理業(yè)務(wù)表之間的基礎(chǔ)關(guān)聯(lián)關(guān)系，包括：對(duì)上述多個(gè)待批量處理業(yè)務(wù)表進(jìn)行基礎(chǔ)關(guān)聯(lián)關(guān)系的加工處理，其中，上述加工處理包括增量追加處理和/或全量覆蓋處理；基于加工處理結(jié)果確定上述多個(gè)待批量處理業(yè)務(wù)表之間的基礎(chǔ)關(guān)聯(lián)關(guān)系。

可選的，對(duì)上述多個(gè)待批量處理業(yè)務(wù)表進(jìn)行基礎(chǔ)關(guān)聯(lián)關(guān)系的加工處理，包括：通過(guò)對(duì)上述多個(gè)待批量處理業(yè)務(wù)表中的新增數(shù)據(jù)進(jìn)行增量追加關(guān)聯(lián)處理，得到增量關(guān)聯(lián)結(jié)果，并基于上述增量關(guān)聯(lián)結(jié)果確定上述多個(gè)待批量處理業(yè)務(wù)表的第一基礎(chǔ)關(guān)聯(lián)關(guān)系；和/或?qū)ι鲜龆鄠€(gè)待批量處理業(yè)務(wù)表中的全部數(shù)據(jù)進(jìn)行全量覆蓋關(guān)聯(lián)處理，得到全量關(guān)聯(lián)結(jié)果，并基于上述全量關(guān)聯(lián)結(jié)果確定上述多個(gè)待批量處理業(yè)務(wù)表的第二基礎(chǔ)關(guān)聯(lián)關(guān)系。

可選的，基于上述基礎(chǔ)關(guān)聯(lián)關(guān)系、上述關(guān)聯(lián)需求邏輯和上述關(guān)聯(lián)取數(shù)邏輯，對(duì)上述多個(gè)待批量處理業(yè)務(wù)表進(jìn)行批量關(guān)聯(lián)處理，包括：根據(jù)上述多個(gè)待批量處理業(yè)務(wù)表的基礎(chǔ)關(guān)聯(lián)關(guān)系，對(duì)上述多個(gè)待批量處理業(yè)務(wù)表進(jìn)行第一批量關(guān)聯(lián)處理，得到第一批量關(guān)系處理結(jié)果；基于上述第一批量關(guān)聯(lián)處理結(jié)果和上述關(guān)聯(lián)需求邏輯，對(duì)上述待批量處理業(yè)務(wù)表進(jìn)行第二批量關(guān)聯(lián)處理，得到第二批量關(guān)系處理結(jié)果；基于上述第二批量關(guān)聯(lián)處理結(jié)果和上述關(guān)聯(lián)取數(shù)邏輯，對(duì)上述待批量處理業(yè)務(wù)表進(jìn)行第三批量關(guān)聯(lián)處理，得到第三批量關(guān)系處理結(jié)果。

可選的，在對(duì)上述多個(gè)待批量處理業(yè)務(wù)表進(jìn)行批量關(guān)聯(lián)處理之后，上述方法還包括：對(duì)上述第一批量關(guān)聯(lián)處理結(jié)果、上述第二批量關(guān)系處理結(jié)果、上述第三批量關(guān)系處理結(jié)果進(jìn)行分段存儲(chǔ)。