[發(fā)明專利]一種起到自動(dòng)篩選和備份功能的數(shù)據(jù)部署系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201910906104.1
• 申請(qǐng)日: 2019-09-24
• 公開(kāi)（公告）號(hào): CN110647585A
• 公開(kāi)（公告）日: 2020-01-03
• 發(fā)明（設(shè)計(jì)）人: 宋儀軒;闞蘇立;謝可輝
• 申請(qǐng)（專利權(quán)）人: 江蘇醫(yī)健大數(shù)據(jù)保護(hù)與開(kāi)發(fā)有限公司
• 主分類號(hào): G06F16/27
• 分類號(hào): G06F16/27;G06F16/215
• 代理公司: 11624 北京卓嵐智財(cái)知識(shí)產(chǎn)權(quán)代理事務(wù)所(特殊普通合伙)
• 代理人: 郭智

本發(fā)明涉及數(shù)據(jù)部署技術(shù)領(lǐng)域，具體地說(shuō)，涉及一種起到自動(dòng)篩選和備份功能的數(shù)據(jù)部署系統(tǒng)。其包括數(shù)據(jù)篩選單元和數(shù)據(jù)備份單元，數(shù)據(jù)篩選單元和數(shù)據(jù)備份單元通過(guò)互聯(lián)網(wǎng)實(shí)現(xiàn)數(shù)據(jù)交互。該起到自動(dòng)篩選和備份功能的數(shù)據(jù)部署系統(tǒng)中，設(shè)置數(shù)據(jù)篩選單元，對(duì)大數(shù)據(jù)環(huán)境下海量初始檢測(cè)器和有限自體的特點(diǎn)，根據(jù)初始檢測(cè)器篩選算法的要求，通過(guò)初始檢測(cè)器和自體的合理冗余與分布，構(gòu)建適合快速篩選海量初始檢測(cè)器的環(huán)境，設(shè)置數(shù)據(jù)備份單元，數(shù)據(jù)通道從客戶端獲取數(shù)據(jù)緩存于云端存儲(chǔ)單元內(nèi)，并將處理后的數(shù)據(jù)存放在虛擬化的存儲(chǔ)中，實(shí)現(xiàn)數(shù)據(jù)云端備份，防止數(shù)據(jù)丟失。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)部署技術(shù)領(lǐng)域，具體地說(shuō)，涉及一種起到自動(dòng)篩選和備份功能的數(shù)據(jù)部署系統(tǒng)。

背景技術(shù)

隨著大數(shù)據(jù)時(shí)代的到來(lái)，數(shù)據(jù)信息量日益龐大，導(dǎo)致數(shù)據(jù)部署效率低，同時(shí)，數(shù)據(jù)內(nèi)含有大量信息，一旦數(shù)據(jù)部署系統(tǒng)損壞，難以找回，造成嚴(yán)重?fù)p失。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種起到自動(dòng)篩選和備份功能的數(shù)據(jù)部署系統(tǒng)，以解決上述背景技術(shù)中提出的某種或某些缺陷。

為實(shí)現(xiàn)上述目的，本發(fā)明提供一種起到自動(dòng)篩選和備份功能的數(shù)據(jù)部署系統(tǒng)，包括數(shù)據(jù)篩選單元和數(shù)據(jù)備份單元，數(shù)據(jù)篩選單元和數(shù)據(jù)備份單元通過(guò)互聯(lián)網(wǎng)實(shí)現(xiàn)數(shù)據(jù)交互，數(shù)據(jù)篩選單元用于對(duì)數(shù)據(jù)進(jìn)行篩選，數(shù)據(jù)篩選單元流程如下：

S11、將數(shù)量有限的自體保存到存儲(chǔ)與計(jì)算節(jié)點(diǎn)的內(nèi)存中；

S12、依據(jù)匹配規(guī)則，與該存儲(chǔ)與計(jì)算節(jié)點(diǎn)海量初始檢測(cè)器子集中的檢測(cè)器進(jìn)行匹配檢查；

S13、判斷該海量初始檢測(cè)器子集中的那些初始檢測(cè)器能成為候選成熟檢測(cè)器；

S14、將候選成熟檢測(cè)器以及與自體之間的最大匹配值發(fā)送給優(yōu)化節(jié)點(diǎn)。

作為優(yōu)選，S12中，匹配規(guī)則采用BMH2CKMP算法，其步驟如下：

①、以BMH2C算法為基礎(chǔ)，修改自體數(shù)據(jù)為正向匹配；

②、預(yù)處理對(duì)patten串求next數(shù)組；

③、模式匹配時(shí)，若字符失配，則判斷跳躍值為正向還是負(fù)向，正向則選擇跳躍，獲取最大位移，負(fù)向則查找next數(shù)組，挪動(dòng)j的位置，來(lái)強(qiáng)制i不回溯。

作為優(yōu)選，next數(shù)組定義如下：

即next[j]＝k＞0時(shí)，表示P[0…k-1]＝P[j-k,j-1]。

作為優(yōu)選，判斷候選成熟檢測(cè)器流程如下：

S21、保存全部存儲(chǔ)與計(jì)算節(jié)點(diǎn)發(fā)送給優(yōu)化節(jié)點(diǎn)的候選成熟檢測(cè)器；

S22、對(duì)海量候選的成熟的檢測(cè)器按照最大匹配度從小到大進(jìn)行排序并構(gòu)建集合；

S23、循環(huán)取出候選成熟的檢測(cè)器；

S24、判斷是否檢測(cè)器數(shù)量達(dá)到系統(tǒng)的設(shè)定值，若達(dá)到循環(huán)至S23，若未達(dá)到進(jìn)入下一步；

S25、取出集合中第一個(gè)候選成熟檢測(cè)器放入優(yōu)化的集合中。

作為優(yōu)選，數(shù)據(jù)備份單元包括云端存儲(chǔ)單元和客戶端單元，云端存儲(chǔ)單元流程如下：

S31、數(shù)據(jù)通道從客戶端獲取數(shù)據(jù)緩存于云端存儲(chǔ)單元內(nèi)；

S32、對(duì)數(shù)據(jù)進(jìn)行相關(guān)處理；

S33、將處理后的數(shù)據(jù)存放在虛擬化的存儲(chǔ)中。

作為優(yōu)選，S32中，數(shù)據(jù)進(jìn)行相關(guān)處理包括數(shù)據(jù)壓縮單元，數(shù)據(jù)加密單元和重復(fù)數(shù)據(jù)刪除單元。

作為優(yōu)選，數(shù)據(jù)壓縮單元采用LZHJ算法，LZHJ算法流程如下：