[發(fā)明專利]一種數(shù)據(jù)存儲系統(tǒng)、數(shù)據(jù)處理方法、電子設(shè)備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202211407850.4
• 申請日: 2022-11-10
• 公開（公告）號: CN115599790A
• 公開（公告）日: 2023-01-13
• 發(fā)明（設(shè)計(jì)）人: 劉汪根;謝玉波
• 申請（專利權(quán)）人: 星環(huán)信息科技（上海）股份有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/27;G06F16/28
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 郭德霞

本發(fā)明公開了一種數(shù)據(jù)存儲系統(tǒng)、數(shù)據(jù)處理方法、電子設(shè)備和存儲介質(zhì)。其中，該數(shù)據(jù)存儲系統(tǒng)包括：請求調(diào)度服務(wù)模塊、行存儲模塊、列存儲模塊請求調(diào)度服務(wù)模塊獲取客戶端的數(shù)據(jù)處理請求，并根據(jù)數(shù)據(jù)處理請求的屬性信息分配至行存儲模塊和列存儲模塊中至少之一；行存儲模塊包括行數(shù)據(jù)處理引擎，列存儲模塊包括列數(shù)據(jù)處理引擎，行存儲模塊以及列存儲模塊執(zhí)行請求調(diào)度服務(wù)模塊分配的數(shù)據(jù)處理請求對應(yīng)的數(shù)據(jù)處理。本發(fā)明實(shí)施例，通過調(diào)度服務(wù)模塊根據(jù)數(shù)據(jù)處理請求的屬性信息分配至行存儲模塊和列存儲模塊，基于不同的處理引擎處理不同的數(shù)據(jù)處理請求，實(shí)現(xiàn)不同類型數(shù)據(jù)處理請求處理的高效性，增強(qiáng)用戶的使用體驗(yàn)。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)存儲技術(shù)領(lǐng)域，尤其涉及一種數(shù)據(jù)存儲系統(tǒng)、數(shù)據(jù)處理方法、電子設(shè)備和存儲介質(zhì)。

背景技術(shù)

在數(shù)據(jù)庫系統(tǒng)中，數(shù)據(jù)存儲方式及存取效率是影響數(shù)據(jù)庫系統(tǒng)性能的重要因素。混合事務(wù)和分析處理(Hybrid Transaction and Analytical Process，HTAP)數(shù)據(jù)庫是一款同時(shí)支持聯(lián)機(jī)事務(wù)處理過程(Online Trans action Processing,OLTP)和聯(lián)機(jī)分析處理(Online Analytical Proces sing，OLAP)兩種業(yè)務(wù)類型的分布式數(shù)據(jù)庫，HTAP系統(tǒng)能夠?qū)崟r(shí)分析從事務(wù)處理產(chǎn)生的數(shù)據(jù)，并且同時(shí)具有OLTP和OLAP系統(tǒng)的上述優(yōu)點(diǎn)。

目前主要通過數(shù)據(jù)倉庫技術(shù)(Extract-Transform-Load，ETL)將OLT P和OLAP系統(tǒng)連接到一起，OLTP系統(tǒng)可以根據(jù)ETL過程將數(shù)據(jù)導(dǎo)入OLAP系統(tǒng)。由于OLTP系統(tǒng)和OLAP系統(tǒng)的數(shù)據(jù)完全異步模式，處理時(shí)間長，且無法保證一致性的問題。所以，一種能夠保證高效處理數(shù)據(jù)的數(shù)據(jù)存儲系統(tǒng)成為了目前亟待解決的問題。

發(fā)明內(nèi)容

本發(fā)明提供了一種數(shù)據(jù)存儲系統(tǒng)、數(shù)據(jù)處理方法、電子設(shè)備和存儲介質(zhì)，以實(shí)現(xiàn)數(shù)據(jù)庫高效處理不同類型的數(shù)據(jù)，提升用戶的使用體驗(yàn)。

根據(jù)本發(fā)明的一方面，提供了一種數(shù)據(jù)存儲系統(tǒng)，其中，該數(shù)據(jù)存儲系統(tǒng)包括：

請求調(diào)度服務(wù)模塊、行存儲模塊、列存儲模塊；

請求調(diào)度服務(wù)模塊獲取客戶端的數(shù)據(jù)處理請求，并根據(jù)數(shù)據(jù)處理請求的屬性信息分配至行存儲模塊和列存儲模塊中至少之一；

行存儲模塊包括行數(shù)據(jù)處理引擎，列存儲模塊包括列數(shù)據(jù)處理引擎，行存儲模塊以及列存儲模塊執(zhí)行請求調(diào)度服務(wù)模塊分配的數(shù)據(jù)處理請求對應(yīng)的數(shù)據(jù)處理。

根據(jù)本發(fā)明的另一方面，提供了一種數(shù)據(jù)處理方法，其中，應(yīng)用于數(shù)據(jù)存儲系統(tǒng)，該方法包括：

獲取客戶端的數(shù)據(jù)處理請求；

根據(jù)請求調(diào)度服務(wù)模塊按照數(shù)據(jù)處理請求的屬性信息分配數(shù)據(jù)處理請求至行存儲模塊和列存儲模塊中至少之一；

基于行存儲模塊和列存儲模塊中至少之一執(zhí)行請求調(diào)度服務(wù)模塊分配的數(shù)據(jù)處理請求對應(yīng)的數(shù)據(jù)處理。

根據(jù)本發(fā)明的另一方面，提供了一種數(shù)據(jù)處理裝置，其中，應(yīng)用于數(shù)據(jù)存儲系統(tǒng)，該裝置包括：

請求獲取模塊，用于獲取客戶端的數(shù)據(jù)處理請求；

請求分配模塊，用于根據(jù)請求調(diào)度服務(wù)模塊按照數(shù)據(jù)處理請求的屬性信息分配數(shù)據(jù)處理請求至行存儲模塊和列存儲模塊中至少之一；

數(shù)據(jù)處理模塊，用于基于行存儲模塊和列存儲模塊中至少之一執(zhí)行請求調(diào)度服務(wù)模塊分配的數(shù)據(jù)處理請求對應(yīng)的數(shù)據(jù)處理。

根據(jù)本發(fā)明的另一方面，提供了一種電子設(shè)備，該電子設(shè)備包括：

至少一個(gè)處理器；以及

與至少一個(gè)處理器通信連接的存儲器；其中，