[發明專利]一種數據脫敏方法及系統在審
| 申請號: | 201911058678.4 | 申請日: | 2019-11-01 |
| 公開(公告)號: | CN110795764A | 公開(公告)日: | 2020-02-14 |
| 發明(設計)人: | 董巖;楊兆明;李麗;袁純良 | 申請(專利權)人: | 中國銀行股份有限公司 |
| 主分類號: | G06F21/62 | 分類號: | G06F21/62;G06F16/16 |
| 代理公司: | 11127 北京三友知識產權代理有限公司 | 代理人: | 周曉飛;谷敬麗 |
| 地址: | 100818 *** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 脫敏 目標環境 主機環境 數據交換服務器 交換服務器 存儲空間 接收數據 刪除數據 時間成本 脫敏過程 原始數據 導出 刪除 數據庫 發送 占用 | ||
本發明提供了一種數據脫敏方法及系統,其中,該方法包括:在主機環境下,將帶庫中的原始數據進行劃分并導出,得到待脫敏文件;對待脫敏文件進行脫敏;通過數據交換服務器接收已脫敏文件,接收完成后,刪除主機環境下相應的已脫敏文件;在目標環境下,接收數據交換服務器發送的已脫敏文件,并導入目標環境下的數據庫,在接收完成后,刪除數據交換服務器中相應的已脫敏文件。本發明提出的數據脫敏方法及系統在脫敏過程中占用的資源少,可以節省主機環境、數據交換服務器以及目標環境的存儲空間,并且可以提高數據脫敏的效率,節省時間成本。
技術領域
本發明涉及數據脫敏技術領域,尤指一種數據脫敏方法及系統。
背景技術
基于監管要求,用于開發、測試的數據需要進行脫敏處理。大型銀行核心業務系統大多數是基于主機的應用系統,在主機上存有海量業務數據。如圖1所示,由于監管要求生產系統與開發、測試系統網絡分離,無法通過生產數據庫到開發、測試數據庫的直接“庫到庫”進行數據脫敏。所以現有數據脫敏方法是建立一套主機環境,在該主機環境下建立專用數據庫,從帶庫中將數據恢復到專用數據庫中。進而,利用運行數據脫敏程序將敏感數據進行脫敏,然后將專用數據庫中的脫敏數據,導出成文件傳到數據交換服務器,開發、測試等目標環境從數據交換服務器獲取到脫敏數據后,加載到目標環境數據庫中使用或備份磁帶交付。
采用上述方案,需要單獨建立一套主機環境(包括數據庫環境)用于脫敏,還需要占用大量主機資源(存儲、CPU、內存),數據交換服務器也需要存儲海量數據。在進行脫敏時,這個環境不能做其它用途。由于每個環節都需要串行處理,整個脫敏處理時間長。根據監管要求生產與開發測試網分離,主機環境與開發、測試環境無法直接交換數據,只能在緩沖區數據交換服務器進行數據交互,使得主機環境、數據交換服務器、目標環境都要額外存儲、存放海量數據。因此,該方案需要大量的主機資源和時間成本。
綜上來看,亟需一種占用資源少、脫敏效率高的數據脫敏方法。
發明內容
為解決現有技術存在的問題,本發明提出了一種數據脫敏方法及系統,在脫敏過程中,無需建立單獨的專用數據庫,相比較現有技術建立專用數據庫再進行脫敏,本方法及系統可以直接對文件進行脫敏,提高了脫敏效率。本方法及系統的脫敏過程可以實現動態、并行的處理方式,僅需利用少量存儲空間存放文件,在完成每一步驟且數據成功下傳到下一模塊后,中間文件即可刪除,使脫敏過程占用的資源少。
在本發明一實施例中,提出了一種數據脫敏方法,該方法包括:
在主機環境下,將帶庫中的原始數據進行劃分并導出,得到待脫敏文件;
對所述待脫敏文件進行脫敏;
通過數據交換服務器接收已脫敏文件,接收完成后,刪除主機環境下相應的已脫敏文件;
在目標環境下,接收所述數據交換服務器發送的已脫敏文件,并導入目標環境下的數據庫,在接收完成后,刪除所述數據交換服務器中相應的已脫敏文件。
在本發明一實施例中,還提出了一種數據脫敏系統,該系統包括:
數據導出模塊,用于在主機環境下,將帶庫中的原始數據導出并進行劃分,得到待脫敏文件;
數據脫敏模塊,用于對所述待脫敏文件進行脫敏;
數據傳輸模塊,設置于數據交換服務器,用于接收已脫敏文件;在所述數據傳輸模塊完成已脫敏文件的接收后,所述數據脫敏模塊刪除相應的已脫敏文件;
脫敏數據導入模塊,用于接收所述數據交換服務器發送的已脫敏文件,并導入目標環境下的數據庫;在所述脫敏數據導入模塊完成已脫敏文件的接收后,所述數據傳輸模塊刪除相應的已脫敏文件。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于中國銀行股份有限公司,未經中國銀行股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201911058678.4/2.html,轉載請聲明來源鉆瓜專利網。





