[發(fā)明專利]一種去除敏感數(shù)據(jù)敏感性的方法及裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201310503798.7
• 申請(qǐng)日: 2013-10-23
• 公開(kāi)（公告）號(hào): CN103500226A
• 公開(kāi)（公告）日: 2014-01-08
• 發(fā)明（設(shè)計(jì)）人: 周期律;焦偉;蔡仕志;張旭春;于進(jìn);孟毅穎;涂曉軍;王智忠;牛曄;嚴(yán)晨光;郭麗;周曉聰
• 申請(qǐng)（專利權(quán)）人: 中國(guó)農(nóng)業(yè)銀行股份有限公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 王寶筠

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，具體涉及一種去除敏感數(shù)據(jù)敏感性的方法及裝置。

背景技術(shù)

隨著信息化進(jìn)程的發(fā)展，在一些行業(yè)的數(shù)據(jù)庫(kù)中經(jīng)常存放著大量具有敏感性的原數(shù)據(jù)，例如姓名、地址、電話、身份證號(hào)、金額等等，這些數(shù)據(jù)如果泄露會(huì)對(duì)企業(yè)或個(gè)人造成惡劣影響。同時(shí)，對(duì)數(shù)據(jù)進(jìn)行測(cè)試是測(cè)試數(shù)據(jù)庫(kù)工作的基礎(chǔ)，由于數(shù)據(jù)庫(kù)中存儲(chǔ)著大量敏感數(shù)據(jù)，因此在構(gòu)造測(cè)試環(huán)境時(shí)，需要對(duì)這些數(shù)據(jù)進(jìn)行“脫敏”處理，以使測(cè)試環(huán)境中的數(shù)據(jù)喪失敏感性，避免在數(shù)據(jù)測(cè)試過(guò)程中對(duì)敏感數(shù)據(jù)的泄露。

在現(xiàn)有技術(shù)中，去除敏感數(shù)據(jù)敏感性可以采用混淆處理的方式，即將所有敏感數(shù)據(jù)打亂重新存儲(chǔ)在原有位置。具體的，現(xiàn)有技術(shù)中通常將數(shù)據(jù)庫(kù)中的全部包含敏感數(shù)據(jù)的記錄裝載到外部存儲(chǔ)器中，如數(shù)據(jù)量為N，第一次從N個(gè)記錄隨機(jī)選出一個(gè)記錄，與第N個(gè)記錄的數(shù)據(jù)交換，然后再?gòu)腘-1個(gè)記錄中隨機(jī)選出一個(gè)記錄，與第N-1個(gè)記錄的數(shù)據(jù)交換，循環(huán)執(zhí)行上述步驟N次，完成敏感數(shù)據(jù)混淆，處理后再將全部記錄裝載回?cái)?shù)據(jù)庫(kù)中對(duì)應(yīng)位置。但是，現(xiàn)有技術(shù)的方法使用了記錄數(shù)量多一倍的額外外存開(kāi)銷，當(dāng)記錄數(shù)量巨大時(shí)，額外存儲(chǔ)開(kāi)銷大，且訪問(wèn)速度慢，同時(shí)數(shù)據(jù)庫(kù)與外存間多了兩次全量磁盤存取，效率較低。

發(fā)明內(nèi)容

有鑒于此，本發(fā)明的主要目的是提供一種去除敏感數(shù)據(jù)敏感性的方法及裝置，以解決現(xiàn)有技術(shù)中去除敏感數(shù)據(jù)敏感性時(shí)額外存儲(chǔ)開(kāi)銷大且效率較低的問(wèn)題。

為解決上述問(wèn)題，本發(fā)明提供的技術(shù)方案如下：

一種去除敏感數(shù)據(jù)敏感性的方法，所述方法包括：

從M條數(shù)據(jù)記錄中選取其中N條數(shù)據(jù)記錄，記錄所述N條數(shù)據(jù)記錄的數(shù)據(jù)位置，其中，N、M為大于0的整數(shù)，N小于M；

將選取的N條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)存儲(chǔ)在設(shè)置的線性內(nèi)存緩存中；

將M條數(shù)據(jù)記錄中每一條未被選取的數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)與所述線性內(nèi)存緩存中隨機(jī)一條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)進(jìn)行交換；

用交換后線性內(nèi)存緩存中的N條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)替換記錄的數(shù)據(jù)位置上原有的N條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)。

相應(yīng)的，所述從M條數(shù)據(jù)記錄中選取其中N條數(shù)據(jù)記錄，包括：

隨機(jī)選取M條數(shù)據(jù)記錄中的N條數(shù)據(jù)記錄。

相應(yīng)的，所述記錄所述N條數(shù)據(jù)記錄的數(shù)據(jù)位置，包括：

當(dāng)所述M條數(shù)據(jù)記錄存儲(chǔ)在數(shù)據(jù)庫(kù)時(shí)，將所述N條數(shù)據(jù)記錄中每一條數(shù)據(jù)記錄的主鍵信息存儲(chǔ)在線性標(biāo)記緩存中；

當(dāng)所述M條數(shù)據(jù)記錄存儲(chǔ)在數(shù)據(jù)庫(kù)導(dǎo)出文件時(shí)，將所述N條數(shù)據(jù)記錄中每一條數(shù)據(jù)記錄的入口值存儲(chǔ)在線性標(biāo)記緩存中。

相應(yīng)的，所述將M條數(shù)據(jù)記錄中每一條未被選取的數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)與所述線性內(nèi)存緩存中隨機(jī)一條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)進(jìn)行交換，包括：

當(dāng)所述M條數(shù)據(jù)記錄存儲(chǔ)在數(shù)據(jù)庫(kù)時(shí)，順序獲取M條數(shù)據(jù)記錄中每一條數(shù)據(jù)記錄的主鍵信息，判斷該主鍵信息是否存儲(chǔ)在所述線性標(biāo)記緩存中，如果是，則獲取M條數(shù)據(jù)記錄中下一條數(shù)據(jù)記錄的主鍵信息，如果否，則將該主鍵信息對(duì)應(yīng)的數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)與所述線性內(nèi)存緩存中隨機(jī)一條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)進(jìn)行交換；

當(dāng)所述M條數(shù)據(jù)記錄存儲(chǔ)在數(shù)據(jù)庫(kù)導(dǎo)出文件時(shí)，順序獲取M條數(shù)據(jù)記錄中每一條數(shù)據(jù)記錄的入口值，判斷該入口值是否存儲(chǔ)在所述線性標(biāo)記緩存中，如果是，則獲取M條數(shù)據(jù)記錄中下一條數(shù)據(jù)記錄的入口值，如果否，則將該入口值對(duì)應(yīng)的數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)與所述線性內(nèi)存緩存中隨機(jī)一條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)進(jìn)行交換。

相應(yīng)的，所述從M條數(shù)據(jù)記錄中選取其中N條數(shù)據(jù)記錄，包括：

順序選取M條數(shù)據(jù)記錄中第1條至第N條數(shù)據(jù)記錄。

一種去除敏感數(shù)據(jù)敏感性的裝置，所述裝置包括：

選取單元，用于從M條數(shù)據(jù)記錄中選取其中N條數(shù)據(jù)記錄，其中，N、M為大于0的整數(shù)，N小于M；

記錄單元，用于記錄所述N條數(shù)據(jù)記錄的數(shù)據(jù)位置；

存儲(chǔ)單元，用于將選取的N條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)存儲(chǔ)在設(shè)置的線性內(nèi)存緩存中；

第一交換單元，用于將M條數(shù)據(jù)記錄中每一條未被選取的數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)與所述線性內(nèi)存緩存中隨機(jī)一條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)進(jìn)行交換；

第二交換單元，用于用交換后線性內(nèi)存緩存中的N條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)替換記錄的數(shù)據(jù)位置上原有的N條數(shù)據(jù)記錄所包含的敏感數(shù)據(jù)。

相應(yīng)的，所述選取單元具體用于：

隨機(jī)選取M條數(shù)據(jù)記錄中的N條數(shù)據(jù)記錄。

相應(yīng)的，所述記錄單元具體用于：