[發明專利]基于定時任務的數據增量靜態脫敏實現方法及系統在審
| 申請號: | 202011576819.4 | 申請日: | 2020-12-28 |
| 公開(公告)號: | CN112668047A | 公開(公告)日: | 2021-04-16 |
| 發明(設計)人: | 王哲;張濱;孫思清 | 申請(專利權)人: | 浪潮云信息技術股份公司 |
| 主分類號: | G06F21/62 | 分類號: | G06F21/62;G06F16/22;G06F16/2455;G06F16/23;G06F9/48;G06F16/25;G06F16/28 |
| 代理公司: | 濟南信達專利事務所有限公司 37100 | 代理人: | 孫園園 |
| 地址: | 250100 山東省濟南市高*** | 國省代碼: | 山東;37 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 基于 定時 任務 數據 增量 靜態 實現 方法 系統 | ||
1.一種基于定時任務的數據增量靜態脫敏實現方法,其特征在于,該方法具體如下:
創建定時任務:部署定時任務注冊中心,配置定時任務執行器并注冊到注冊中心,同時創建定時任務,設置定時任務的執行周期和任務參數并啟動定時任務;
篩選增量數據:定時任務定期篩選出增量數據;
執行數據脫敏:定時任務定周期調用執行增量數據脫敏的API接口實現增量脫敏。
2.根據權利要求1所述的基于定時任務的數據增量靜態脫敏實現方法,其特征在于,定時任務是基于xxl-job開源框架進行二次開發,通過配置項部署成為定時任務執行器,實時向注冊中心發送注冊請求。
3.根據權利要求1所述的基于定時任務的數據增量靜態脫敏實現方法,其特征在于,定時任務定義方法具體如下:
添加@XxlJob注解,完成定時任務注冊;
定時任務根據設置好的定時任務時間參數定周期執行任務。
4.根據權利要求1所述的基于定時任務的數據增量靜態脫敏實現方法,其特征在于,篩選增量數據具體如下:
定時任務啟動后,連接源數據庫,獲取到待脫敏數據表的數據;
根據脫敏任務指定的時間字段篩選出所有未進行脫敏的數據;其中,時間字段包括數據表的創建時間字段和數據表的更新時間字段。
5.根據權利要求1所述的基于定時任務的數據增量靜態脫敏實現方法,其特征在于,執行數據脫敏具體如下:
獲取到脫敏算法標識后,對要進行脫敏的元數據進行脫敏并緩存;
連接目標數據庫,檢測是否存在同名稱的數據表:
若沒有,則先進行建表;
建表完成后,根據對應的靜態脫敏算法對數據進行脫敏,并將脫敏后的數據更新至目標數據庫中,完成靜態脫敏任務;其中,目標數據庫包括MySQL、Oracle、SQLSserver及DB2的關系數據庫。
6.根據權利要求1-5中任一所述的基于定時任務的數據增量靜態脫敏實現方法,其特征在于,脫敏任務完成后,自動關閉對源數據庫和目標數據庫的連接訪問,控制數據庫的訪問量。
7.一種基于定時任務的數據增量靜態脫敏系統,其特征在于,該系統采用Java技術進行開發,基于SpringBoot框架實現,將定時增量脫敏功能發布為API接口,允許前端開發人員和應用服務調用;前端開發人員用于開發web前端頁面,基于web技術中的jsp和js相關技術開發靜態頁面和功能函數,支持客戶自由選擇全量脫敏、增量脫敏、定時執行及手動執行的選項,實現數據庫及數據表的選擇,支持MySQL、Oracle、Sqlserver及DB2的關系數據庫。
8.根據權利要求7所述的基于定時任務的數據增量靜態脫敏系統,其特征在于,該系統包括,
創建模塊,用于部署定時任務注冊中心,配置定時任務執行器并注冊到注冊中心,同時創建定時任務,設置定時任務的執行周期和任務參數并啟動定時任務;
篩選模塊,用于定時任務定期篩選出增量數據;
脫敏模塊,用于根據對應的靜態脫敏算法對數據進行脫敏,將脫敏后的數據更新至目標數據庫中。
9.根據權利要求8所述的基于定時任務的數據增量靜態脫敏系統,其特征在于,定時任務是基于xxl-job開源框架進行二次開發,通過配置項部署成為定時任務執行器,實時向注冊中心發送注冊請求;
定時任務定義方法具體如下:
添加@XxlJob注解,完成定時任務注冊;
定時任務根據設置好的定時任務時間參數定周期執行任務。
10.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質中存儲有計算機執行指令,當處理器執行所述計算機執行時,實現如權利要求1至6中所述的基于定時任務的數據增量靜態脫敏方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于浪潮云信息技術股份公司,未經浪潮云信息技術股份公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011576819.4/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





