[發(fā)明專利]一種數(shù)據(jù)檢索系統(tǒng)

有效

• 申請?zhí)枺?/td>: 202110039190.8
• 申請日: 2021-01-13
• 公開（公告）號: CN112364033B
• 公開（公告）日: 2021-04-13
• 發(fā)明（設(shè)計）人: 朱金星;張靜雅;羅義華;祝文東
• 申請（專利權(quán)）人: 北京云真信科技有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/2453;G06F16/242;G06F16/28
• 代理公司: 北京鍾維聯(lián)合知識產(chǎn)權(quán)代理有限公司 11579
• 代理人: 丁慧玲

1.一種數(shù)據(jù)檢索系統(tǒng)，其特征在于，包括數(shù)據(jù)庫，處理器，存儲有計算機程序的存儲器，其中，所述數(shù)據(jù)庫中存儲有預(yù)先構(gòu)建的數(shù)據(jù)表，所述數(shù)據(jù)表的數(shù)據(jù)量在百億級以上，所述數(shù)據(jù)表配置為倒排索引數(shù)據(jù)表，所述數(shù)據(jù)表的每條記錄為數(shù)據(jù)屬性信息，所述數(shù)據(jù)表的字段包括數(shù)據(jù)id、第一屬性信息、第二屬性信息…第M屬性信息，M為正整數(shù)，所述數(shù)據(jù)表的第m屬性信息為變長數(shù)據(jù)類型，所述第m屬性信息包括X個由第一m子屬性信息編碼和第二m子屬性信息編碼組成的信息編碼對，所述第一m子屬性信息編碼和第二m子屬性信息編碼之間通過預(yù)設(shè)的間隔符相連接，其中，m=1,2…M，X為正整數(shù)，每一第一m子屬性信息編碼和第二m子屬性信息編碼基于預(yù)設(shè)的編碼映射表獲取；

當(dāng)所述計算機程序被處理器執(zhí)行時，實現(xiàn)以下步驟：

步驟S1、獲取數(shù)據(jù)查詢請求；

步驟S2、解析所述數(shù)據(jù)查詢請求，獲取數(shù)據(jù)查詢維度信息；

步驟S3、將所述數(shù)據(jù)查詢維度信息轉(zhuǎn)換為與所述數(shù)據(jù)庫查詢語言相匹配的第一查詢信息；

其中，所述數(shù)據(jù)查詢維度信息包括目標數(shù)據(jù)維度以及每一目標數(shù)據(jù)維度對應(yīng)的目標值信息；

步驟S4、根據(jù)所述第一查詢信息、所述數(shù)據(jù)表和預(yù)設(shè)的編碼映射表生成對應(yīng)的檢索式，所述編碼映射表用于配置屬性信息和編碼值映射關(guān)系；

步驟S5、基于所述檢索式在所述數(shù)據(jù)表中進行倒排索引，生成目標數(shù)據(jù)id列表。

2.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，

所述數(shù)據(jù)查詢維度信息包括第m屬性信息對應(yīng)的第一m子屬性信息、第二m子屬性信息或第一m子屬性信息與第二m子屬性信息組成的信息對。

3.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，

所述數(shù)據(jù)表的第n屬性信息為變長數(shù)據(jù)類型，所述第n屬性信息包括Y個元素信息，所述第n屬性信息對應(yīng)的字段所存儲的內(nèi)容為Y個元素信息編碼構(gòu)建的第n列表信息，其中，n=1,2…M，Y為正整數(shù)，每一元素信息編碼基于所述編碼映射表獲取。

4.根據(jù)權(quán)利要求3所述的系統(tǒng)，其特征在于，

所述數(shù)據(jù)查詢維度信息包括第n屬性信息對應(yīng)的一個或多個元素信息。

5.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，

所述步驟S3包括：

步驟S31、將所述數(shù)據(jù)查詢維度信息轉(zhuǎn)換為結(jié)構(gòu)化查詢語言信息；

步驟S32、將所述結(jié)構(gòu)化查詢語言信息轉(zhuǎn)換為與所述數(shù)據(jù)庫查詢語言相匹配的第一查詢信息。

6.根據(jù)權(quán)利要求5所述的系統(tǒng)，其特征在于，

所述數(shù)據(jù)庫為ES數(shù)據(jù)庫，所述系統(tǒng)還包括Doris模塊，

所述步驟S31基于所述Doris模塊將所述維度信息轉(zhuǎn)換為SQL語言；

所述步驟S32基于所述 Doris模塊將所述SQL語言轉(zhuǎn)換為能夠直接在所述ES數(shù)據(jù)庫中查詢的dsl語言，得到所述第一查詢信息。

7.根據(jù)權(quán)利要求6所述的系統(tǒng)，其特征在于，

當(dāng)所述計算機程序被處理器執(zhí)行時，還實現(xiàn)以下步驟：

步驟S6、根據(jù)目標數(shù)據(jù)id列表在所述數(shù)據(jù)庫進行關(guān)聯(lián)，得到目標數(shù)據(jù)；

步驟S7、基于所述Doris模塊將所述目標數(shù)據(jù)進行聚合，生成目標數(shù)據(jù)聚合結(jié)果。

8.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，

所述系統(tǒng)還包括數(shù)據(jù)查詢接口，用于獲取所述數(shù)據(jù)查詢請求。

9.根據(jù)權(quán)利要求1所述的系統(tǒng)，其特征在于，

所述信息還包括信息交互界面，用于呈現(xiàn)所述目標數(shù)據(jù)id列表和/或目標數(shù)據(jù)聚合結(jié)果。