[發(fā)明專(zhuān)利]結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法、設(shè)備、存儲(chǔ)介質(zhì)及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 202010370881.1
• 申請(qǐng)日: 2020-04-30
• 公開(kāi)（公告）號(hào): CN111563098A
• 公開(kāi)（公告）日: 2020-08-21
• 發(fā)明（設(shè)計(jì)）人: 張山;王振華;余自雷;郭鵬程
• 申請(qǐng)（專(zhuān)利權(quán)）人: 深圳壹賬通智能科技有限公司
• 主分類(lèi)號(hào): G06F16/245
• 分類(lèi)號(hào): G06F16/245;G06F16/31;G06F16/33;G06F21/60;G06F21/62
• 代理公司: 深圳市世紀(jì)恒程知識(shí)產(chǎn)權(quán)代理事務(wù)所 44287
• 代理人: 徐進(jìn)之

1.一種結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法，其特征在于，所述結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法包括以下步驟：

接收查詢(xún)終端發(fā)送的攜帶有業(yè)務(wù)類(lèi)型標(biāo)識(shí)的數(shù)據(jù)查詢(xún)請(qǐng)求；

基于所述數(shù)據(jù)查詢(xún)請(qǐng)求，從目標(biāo)數(shù)據(jù)庫(kù)中獲取與所述業(yè)務(wù)類(lèi)型標(biāo)識(shí)對(duì)應(yīng)的目標(biāo)表單；其中，所述目標(biāo)表單中包括結(jié)構(gòu)化字段和非結(jié)構(gòu)化字段；

根據(jù)所述結(jié)構(gòu)化字段和所述非結(jié)構(gòu)化字段，分別從第一預(yù)設(shè)數(shù)據(jù)庫(kù)和第二預(yù)設(shè)數(shù)據(jù)庫(kù)中查詢(xún)得到結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)；其中，所述第一預(yù)設(shè)數(shù)據(jù)庫(kù)中的內(nèi)容用于描述所述結(jié)構(gòu)化字段與所述結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系，所述第二預(yù)設(shè)數(shù)據(jù)庫(kù)中的內(nèi)容用于描述所述非結(jié)構(gòu)化字段與所述非結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系；

將所述結(jié)構(gòu)化數(shù)據(jù)和所述非結(jié)構(gòu)化數(shù)據(jù)發(fā)送至所述查詢(xún)終端。

2.如權(quán)利要求1所述的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法，其特征在于，所述接收查詢(xún)終端發(fā)送的攜帶有業(yè)務(wù)類(lèi)型標(biāo)識(shí)的數(shù)據(jù)查詢(xún)請(qǐng)求之前，所述結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法還包括：

獲取樣本表單數(shù)據(jù)，并將所述樣本表單數(shù)據(jù)按照業(yè)務(wù)類(lèi)型進(jìn)行分類(lèi)，獲得各業(yè)務(wù)類(lèi)型對(duì)應(yīng)的表單數(shù)據(jù)；

對(duì)各業(yè)務(wù)類(lèi)型對(duì)應(yīng)的表單數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取，獲得各業(yè)務(wù)類(lèi)型對(duì)應(yīng)的公共字段數(shù)據(jù)；

根據(jù)各業(yè)務(wù)類(lèi)型對(duì)應(yīng)的公共字段數(shù)據(jù)，建立各業(yè)務(wù)類(lèi)型下結(jié)構(gòu)化字段與結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系，并將所述結(jié)構(gòu)化字段與所述結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系存儲(chǔ)至第一預(yù)設(shè)數(shù)據(jù)庫(kù)；

將各業(yè)務(wù)類(lèi)型對(duì)應(yīng)的表單數(shù)據(jù)中除了所述公共字段數(shù)據(jù)之外的其他數(shù)據(jù)作為不確定字段數(shù)據(jù)；

根據(jù)各業(yè)務(wù)類(lèi)型對(duì)應(yīng)的不確定字段數(shù)據(jù)，建立各業(yè)務(wù)類(lèi)型下非結(jié)構(gòu)化字段與非結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系，并將所述非結(jié)構(gòu)化字段與所述非結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系存儲(chǔ)至第二預(yù)設(shè)數(shù)據(jù)庫(kù)。

3.如權(quán)利要求2所述的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法，其特征在于，所述將所述非結(jié)構(gòu)化字段與所述非結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系存儲(chǔ)至第二預(yù)設(shè)數(shù)據(jù)庫(kù)，包括：

獲取所述非結(jié)構(gòu)化數(shù)據(jù)的目標(biāo)數(shù)據(jù)量；

判斷所述目標(biāo)數(shù)據(jù)量是否大于預(yù)設(shè)數(shù)據(jù)量閾值；

在所述目標(biāo)數(shù)據(jù)量大于所述預(yù)設(shè)數(shù)據(jù)量閾值時(shí)，將所述非結(jié)構(gòu)化字段與所述非結(jié)構(gòu)化數(shù)據(jù)之間的對(duì)應(yīng)關(guān)系通過(guò)文件系統(tǒng)進(jìn)行存儲(chǔ)，獲得所述非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)訪問(wèn)路徑，并將所述存儲(chǔ)訪問(wèn)路徑存儲(chǔ)至第二預(yù)設(shè)數(shù)據(jù)庫(kù)。

4.如權(quán)利要求1～3中任一項(xiàng)所述的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法，其特征在于，所述第二預(yù)設(shè)數(shù)據(jù)庫(kù)包括指定存儲(chǔ)區(qū)域和自由存儲(chǔ)區(qū)域；

所述將所述結(jié)構(gòu)化數(shù)據(jù)和所述非結(jié)構(gòu)化數(shù)據(jù)發(fā)送至所述查詢(xún)終端之后，所述結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法還包括：

獲取所述第二預(yù)設(shè)數(shù)據(jù)庫(kù)中各非結(jié)構(gòu)化數(shù)據(jù)的調(diào)用頻率；

判斷各非結(jié)構(gòu)化數(shù)據(jù)的調(diào)用頻率是否超過(guò)預(yù)設(shè)頻率閾值；

若所述調(diào)用頻率超過(guò)所述預(yù)設(shè)頻率閾值，則將對(duì)應(yīng)的非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)至所述指定存儲(chǔ)區(qū)域；

若所述調(diào)用頻率未超過(guò)所述預(yù)設(shè)頻率閾值，則將對(duì)應(yīng)的非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)至所述自由存儲(chǔ)區(qū)域。

5.如權(quán)利要求4所述的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法，其特征在于，所述若所述調(diào)用頻率未超過(guò)所述預(yù)設(shè)頻率閾值，則將對(duì)應(yīng)的非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)至所述自由存儲(chǔ)區(qū)域之后，所述結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法還包括：

獲取所述結(jié)構(gòu)化數(shù)據(jù)和所述非結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)時(shí)長(zhǎng)；

判斷所述存儲(chǔ)時(shí)長(zhǎng)是否超過(guò)預(yù)設(shè)時(shí)長(zhǎng)；

在所述存儲(chǔ)時(shí)長(zhǎng)超過(guò)所述預(yù)設(shè)時(shí)長(zhǎng)時(shí)，對(duì)所述結(jié)構(gòu)化數(shù)據(jù)和所述非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行清空或更新處理。

6.如權(quán)利要求5所述的結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)查詢(xún)方法，其特征在于，所述預(yù)設(shè)時(shí)長(zhǎng)包括：第一時(shí)長(zhǎng)閾值和第二時(shí)長(zhǎng)閾值，所述第一時(shí)長(zhǎng)閾值小于所述第二時(shí)長(zhǎng)閾值；

所述在所述存儲(chǔ)時(shí)長(zhǎng)超過(guò)所述預(yù)設(shè)時(shí)長(zhǎng)時(shí)，對(duì)所述結(jié)構(gòu)化數(shù)據(jù)和所述非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行清空或更新處理，包括：

在所述存儲(chǔ)時(shí)長(zhǎng)超過(guò)所述第一時(shí)長(zhǎng)閾值時(shí)，對(duì)所述自由存儲(chǔ)區(qū)域中的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行清空或更新處理；

在所述存儲(chǔ)時(shí)長(zhǎng)超過(guò)所述第二時(shí)長(zhǎng)閾值時(shí)，對(duì)所述第一預(yù)設(shè)數(shù)據(jù)庫(kù)中的所述結(jié)構(gòu)化數(shù)據(jù)和所述指定存儲(chǔ)區(qū)域中的非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行清空或更新處理。