[發(fā)明專利]應(yīng)用于數(shù)據(jù)庫擴(kuò)容場景的數(shù)據(jù)處理方法、裝置及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202010722622.0
• 申請日: 2020-07-24
• 公開（公告）號: CN111858765A
• 公開（公告）日: 2020-10-30
• 發(fā)明（設(shè)計(jì)）人: 戴進(jìn)敏;佘俊勝;何錦添;黃操文
• 申請（專利權(quán)）人: 中國工商銀行股份有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/2455
• 代理公司: 北京三友知識產(chǎn)權(quán)代理有限公司 11127
• 代理人: 劉熔;王濤

本發(fā)明公開了一種應(yīng)用于數(shù)據(jù)庫擴(kuò)容場景的數(shù)據(jù)處理方法、裝置及系統(tǒng)，其中，該方法包括：接收數(shù)據(jù)請求信息，數(shù)據(jù)請求信息中包括：賬戶信息和操作信息；基于擴(kuò)容后數(shù)據(jù)庫的分庫規(guī)則確定賬戶信息對應(yīng)數(shù)據(jù)的所屬新數(shù)據(jù)庫信息，以便于根據(jù)所屬新數(shù)據(jù)庫信息通過調(diào)用服務(wù)查找數(shù)據(jù)，其中，調(diào)用服務(wù)與所屬新數(shù)據(jù)庫具有關(guān)聯(lián)關(guān)系；響應(yīng)于未查找到數(shù)據(jù)，基于舊數(shù)據(jù)庫的分庫規(guī)則確定賬戶信息對應(yīng)數(shù)據(jù)的所屬舊數(shù)據(jù)庫信息，以便于根據(jù)所屬舊數(shù)據(jù)庫信息查找數(shù)據(jù)；當(dāng)查找到數(shù)據(jù)時(shí)，根據(jù)數(shù)據(jù)請求信息中的操作信息對該數(shù)據(jù)執(zhí)行相應(yīng)的操作。通過本發(fā)明，可以實(shí)現(xiàn)不停機(jī)數(shù)據(jù)庫擴(kuò)容，在數(shù)據(jù)庫擴(kuò)容時(shí)，能夠繼續(xù)處理作業(yè)，從而可以較好地提高客戶體驗(yàn)感。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，具體涉及一種應(yīng)用于數(shù)據(jù)庫擴(kuò)容場景的數(shù)據(jù)處理方法、裝置及系統(tǒng)。

背景技術(shù)

近年來，隨著銀行信息化進(jìn)程的不斷推進(jìn)，單一的集中式系統(tǒng)作為銀行核心系統(tǒng)已經(jīng)不能滿足日益增長的業(yè)務(wù)要求。銀行的系統(tǒng)架構(gòu)逐步轉(zhuǎn)型為能支持交易高并發(fā)且能快速擴(kuò)容的分布式系統(tǒng)架構(gòu)。

銀行系統(tǒng)是數(shù)據(jù)密集型系統(tǒng)，交易量大，數(shù)據(jù)量大。為了提高系統(tǒng)處理能力，銀行業(yè)務(wù)處理系統(tǒng)的數(shù)據(jù)庫一般會采用水平分表分庫策略，以分散單個數(shù)據(jù)庫的存儲和訪問壓力。

例如，銀行賬戶表有1億條記錄，測算放到64個數(shù)據(jù)庫中比較合適，每個數(shù)據(jù)庫約156萬條記錄。則，如圖1所示，對賬戶ID(Account ID)取模64進(jìn)行運(yùn)算，平均分布到這64個庫中。

水平分庫后，業(yè)務(wù)應(yīng)用程序的處理會變得復(fù)雜，訪問數(shù)據(jù)庫的時(shí)候需要考慮查詢哪個數(shù)據(jù)庫。為了簡化業(yè)務(wù)應(yīng)用程序的開發(fā)，通常的解決辦法是增加一層數(shù)據(jù)庫中間件，主要做SQL路由、優(yōu)化、數(shù)據(jù)聚合等工作，具體流程如圖2所示。

水平分庫后，未來如果數(shù)據(jù)量變化較大，可以通過動態(tài)擴(kuò)充數(shù)據(jù)庫來支持性能的擴(kuò)展。擴(kuò)充數(shù)據(jù)庫會導(dǎo)致分庫規(guī)則的變化，就涉及存量數(shù)據(jù)的遷移。傳統(tǒng)的擴(kuò)充流程可參見圖3所示，由于數(shù)據(jù)庫中間件僅可支持一種路由規(guī)則，因而，傳統(tǒng)擴(kuò)充流程為：①停機(jī)-②數(shù)據(jù)遷移-③按新的分庫路由規(guī)則提供服務(wù)。

由于上述數(shù)據(jù)遷移需要停機(jī)實(shí)施，而且時(shí)間較長，因而導(dǎo)致了銀行業(yè)務(wù)無法辦理，影響了客戶體驗(yàn)。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明提供一種應(yīng)用于數(shù)據(jù)庫擴(kuò)容場景的數(shù)據(jù)處理方法、裝置及系統(tǒng)，以解決上述提及的至少一個問題。

根據(jù)本發(fā)明的第一方面，提供一種應(yīng)用于數(shù)據(jù)庫擴(kuò)容場景的數(shù)據(jù)處理方法，所述方法包括：接收數(shù)據(jù)請求信息，所述數(shù)據(jù)請求信息中包括：賬戶信息和操作信息；基于擴(kuò)容后數(shù)據(jù)庫的分庫規(guī)則確定所述賬戶信息對應(yīng)數(shù)據(jù)的所屬新數(shù)據(jù)庫信息，以便于根據(jù)所屬新數(shù)據(jù)庫信息通過調(diào)用服務(wù)查找數(shù)據(jù)，其中，所述調(diào)用服務(wù)與所述所屬新數(shù)據(jù)庫具有關(guān)聯(lián)關(guān)系；響應(yīng)于未查找到數(shù)據(jù)，基于舊數(shù)據(jù)庫的分庫規(guī)則確定所述賬戶信息對應(yīng)數(shù)據(jù)的所屬舊數(shù)據(jù)庫信息，以便于根據(jù)所屬舊數(shù)據(jù)庫信息查找數(shù)據(jù)；當(dāng)查找到數(shù)據(jù)時(shí)，根據(jù)所述數(shù)據(jù)請求信息中的操作信息對該數(shù)據(jù)執(zhí)行相應(yīng)的操作。

根據(jù)本發(fā)明的第二方面，提供一種應(yīng)用于數(shù)據(jù)庫擴(kuò)容場景的數(shù)據(jù)處理裝置，所述裝置包括：數(shù)據(jù)接收單元，用于接收數(shù)據(jù)請求信息，所述數(shù)據(jù)請求信息中包括：賬戶信息和操作信息；新庫信息確定單元，用于基于擴(kuò)容后數(shù)據(jù)庫的分庫規(guī)則確定所述賬戶信息對應(yīng)數(shù)據(jù)的所屬新數(shù)據(jù)庫信息，以便于根據(jù)所屬新數(shù)據(jù)庫信息通過調(diào)用服務(wù)查找數(shù)據(jù)，其中，所述調(diào)用服務(wù)與所述所屬新數(shù)據(jù)庫具有關(guān)聯(lián)關(guān)系；舊庫信息確定單元，用于響應(yīng)于根據(jù)所屬新數(shù)據(jù)庫信息未查找到數(shù)據(jù)，基于舊數(shù)據(jù)庫的分庫規(guī)則確定所述賬戶信息對應(yīng)數(shù)據(jù)的所屬舊數(shù)據(jù)庫信息，以便于根據(jù)所屬舊數(shù)據(jù)庫信息查找數(shù)據(jù)；執(zhí)行單元，用于當(dāng)查找到數(shù)據(jù)時(shí)，根據(jù)所述數(shù)據(jù)請求信息中的操作信息對該數(shù)據(jù)執(zhí)行相應(yīng)的操作。