[發(fā)明專利]一種非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)和查詢的方法、裝置及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201410234903.6
• 申請(qǐng)日: 2014-05-29
• 公開（公告）號(hào): CN104077355B
• 公開（公告）日: 2018-04-27
• 發(fā)明（設(shè)計(jì)）人: 何方敏
• 申請(qǐng)（專利權(quán)）人: 中國(guó)銀行股份有限公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司11227
• 代理人: 王寶筠

1.一種非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的方法，其特征在于，所述方法包括：

數(shù)據(jù)整合模塊將業(yè)務(wù)系統(tǒng)提供的業(yè)務(wù)操作的業(yè)務(wù)元數(shù)據(jù)信息和電子影像票據(jù)進(jìn)行壓縮處理獲得壓縮數(shù)據(jù)包，同一個(gè)業(yè)務(wù)操作的業(yè)務(wù)元數(shù)據(jù)信息以及電子影像票據(jù)壓縮在一個(gè)壓縮數(shù)據(jù)包中；

所述數(shù)據(jù)整合模塊將所述壓縮數(shù)據(jù)包發(fā)送至分布式系統(tǒng)的主控機(jī)Master；

分布式系統(tǒng)的Master將所述壓縮數(shù)據(jù)包存儲(chǔ)在分布在所述Master的任意一個(gè)數(shù)據(jù)節(jié)點(diǎn)中，所述壓縮數(shù)據(jù)包存儲(chǔ)的關(guān)鍵字包括電子影像票據(jù)ID或業(yè)務(wù)交易信息。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述數(shù)據(jù)整合模塊將所述壓縮數(shù)據(jù)包發(fā)送至分布式數(shù)據(jù)庫(kù)的Master包括：

數(shù)據(jù)整合模塊將所述壓縮數(shù)據(jù)包按照分布式文件系統(tǒng)HDFS協(xié)議發(fā)送至分布式數(shù)據(jù)庫(kù)的Master。

3.根據(jù)權(quán)利要求1-2任意一項(xiàng)所述的方法，其特征在于，所述業(yè)務(wù)交易信息包括：

交易號(hào)碼、文檔類型以及系統(tǒng)編號(hào)。

4.一種非結(jié)構(gòu)化數(shù)據(jù)查詢的方法，其特征在于，所述方法包括：

查詢模塊接收用戶輸入的查詢信息，所述查詢信息包括電子影像票據(jù)ID或業(yè)務(wù)交易信息；

查詢模塊向分布式系統(tǒng)中的主控機(jī)Master發(fā)送查詢請(qǐng)求，所述查詢請(qǐng)求攜帶有所述查詢信息；

所述Master查詢分布在所述Master的所有數(shù)據(jù)節(jié)點(diǎn)獲取與所述查詢信息匹配的壓縮數(shù)據(jù)包，同一個(gè)業(yè)務(wù)操作的業(yè)務(wù)元數(shù)據(jù)信息以及電子影像票據(jù)壓縮在一個(gè)壓縮數(shù)據(jù)包中。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述Master查詢分布在所述Master的所有數(shù)據(jù)節(jié)點(diǎn)獲取與所述查詢信息匹配的壓縮數(shù)據(jù)包包括：

所述Master向分布在所述Master的所有數(shù)據(jù)節(jié)點(diǎn)發(fā)送查詢命令，所述查詢命令攜帶有所述查詢信息；

分布在所述Master的每個(gè)數(shù)據(jù)節(jié)點(diǎn)接收到所述查詢命令后，查詢與所述查詢信息匹配的壓縮數(shù)據(jù)包；

分布在所述Master的節(jié)點(diǎn)向所述Master返回與所述查詢信息匹配的壓縮數(shù)據(jù)包。

6.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述方法還包括：

所述Master將所述壓縮數(shù)據(jù)包發(fā)送至展示模塊進(jìn)行展示。

7.根據(jù)權(quán)利要求4-6任意一項(xiàng)所述的方法，其特征在于，所述查詢模塊向分布式系統(tǒng)中的Master發(fā)送查詢請(qǐng)求包括：

查詢模塊按照分布式文件系統(tǒng)HDFS協(xié)議向分布式系統(tǒng)中的Master發(fā)送查詢請(qǐng)求。

8.一種非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)的裝置，其特征在于，所述裝置包括：

數(shù)據(jù)整合模塊與分布式系統(tǒng)中的主控機(jī)Master相連，分布式系統(tǒng)中的Master與多個(gè)數(shù)據(jù)節(jié)點(diǎn)相連；

數(shù)據(jù)整合模塊，用于將業(yè)務(wù)系統(tǒng)提供的業(yè)務(wù)操作的業(yè)務(wù)元數(shù)據(jù)信息和電子影像票據(jù)進(jìn)行壓縮處理獲得壓縮數(shù)據(jù)包，將所述壓縮數(shù)據(jù)包發(fā)送至分布式系統(tǒng)的Master，同一個(gè)業(yè)務(wù)操作的業(yè)務(wù)元數(shù)據(jù)信息以及電子影像票據(jù)壓縮在一個(gè)壓縮數(shù)據(jù)包中；

分布式系統(tǒng)的Master，用于將所述壓縮數(shù)據(jù)包存儲(chǔ)在分布在所述Master的任意一個(gè)數(shù)據(jù)節(jié)點(diǎn)中，所述壓縮數(shù)據(jù)包存儲(chǔ)的關(guān)鍵字包括電子影像票據(jù)ID或業(yè)務(wù)交易信息；

數(shù)據(jù)節(jié)點(diǎn)，用于存儲(chǔ)所述壓縮數(shù)據(jù)包。

9.根據(jù)權(quán)利要求8所述的裝置，其特征在于，

所述數(shù)據(jù)整合模塊，用于將所述壓縮數(shù)據(jù)包按照分布式文件系統(tǒng)HDFS協(xié)議發(fā)送至分布式數(shù)據(jù)庫(kù)的Master。

10.一種非結(jié)構(gòu)化數(shù)據(jù)查詢的裝置，其特征在于，所述裝置包括：

查詢模塊與分布式系統(tǒng)中的主控機(jī)Master相連，分布式系統(tǒng)中的Master與多個(gè)數(shù)據(jù)節(jié)點(diǎn)相連；

查詢模塊，用于接收用戶輸入的查詢信息，所述查詢信息包括電子影像票據(jù)ID或業(yè)務(wù)交易信息，向分布式系統(tǒng)中的Master發(fā)送查詢請(qǐng)求，所述查詢請(qǐng)求攜帶有所述查詢信息；

分布式系統(tǒng)中的Master，用于查詢分布在所述Master的所有數(shù)據(jù)節(jié)點(diǎn)獲取與所述查詢信息匹配的壓縮數(shù)據(jù)包；

數(shù)據(jù)節(jié)點(diǎn)，用于存儲(chǔ)所述壓縮數(shù)據(jù)包，同一個(gè)業(yè)務(wù)操作的業(yè)務(wù)元數(shù)據(jù)信息以及電子影像票據(jù)壓縮在一個(gè)壓縮數(shù)據(jù)包中。