[發明專利]一種基于JSON解析的數據脫敏系統及方法在審
| 申請號: | 202110234839.1 | 申請日: | 2021-03-03 |
| 公開(公告)號: | CN112966299A | 公開(公告)日: | 2021-06-15 |
| 發明(設計)人: | 唐更新;徐強;宋輝;王鋒;趙衛國 | 申請(專利權)人: | 北京中安星云軟件技術有限公司 |
| 主分類號: | G06F21/62 | 分類號: | G06F21/62;G06F40/205 |
| 代理公司: | 成都魚爪智云知識產權代理有限公司 51308 | 代理人: | 代述波 |
| 地址: | 100000 北京市海淀*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 基于 json 解析 數據 系統 方法 | ||
本發明提出了一種基于JSON解析的數據脫敏系統及方法,涉及數據處理領域。一種基于JSON解析的數據脫敏系統,包括:JSON路徑掃描模塊:用于分別解析多個文檔的JSON路徑;列式轉換模塊:用于根據所述JSON路徑遍歷文檔數據,并將JSON路徑相同的值合并到一個列表,得到列式存儲中間數據;敏感掃描模塊:用于對所述JSON路徑和所述JSON路徑對應的值分別做敏感掃描,得到敏感JSON路徑列表;數據脫敏模塊:用于根據所述敏感JSON路徑對所有文檔數據進行遍歷脫敏;此外本發明還提出了上述系統實現的一種基于JSON解析的MongoDB脫敏方法,本發明能夠支持多種復雜結構的JSON數據使用。
技術領域
本發明涉及數據處理領域,具體而言,涉及一種基于JSON解析的數據脫敏系統及方法。
背景技術
隨著大數據應用在信息時代的普及,其中蘊藏的巨大商業價值被逐步挖掘出來,大數據平臺通過將所有數據整合起來,充分分析與挖掘數據的內在價值,為決策者提供數據統計,分析、數據產品與數據服務。
大數據平臺接入數據中可能包括很多用戶的隱私和敏感信息,如用戶手機號碼,地址等,這些數據存在可能泄漏的風險。大數據平臺一般通過用戶認證,權限管理以及數據加密等技術保證數據的安全,但是這并不能完全從技術上保證數據的安全。另一方面,沒有訪問用戶數據權限的人員,也可能有對該數據進行分析挖掘的需求,數據的訪問約束大大限制的充分挖掘數據價值的范圍。實際生產過程中,應用場景會更加復雜,僅靠對數據訪問權限的控制,滿足不了實際需要,還需要結合其它的脫敏手段。現有的脫敏方法無法滿足各種復雜結構的JSON數據使用。
發明內容
本發明的目的在于提供一種基于JSON解析的數據脫敏系統,其能夠支持多種復雜結構的JSON數據使用。
本發明的另一目的在于提供一種基于JSON解析的數據脫敏方法,其能夠支持多種復雜結構的JSON數據使用。
本發明的實施例是這樣實現的:
第一方面,本申請實施例提供一種基于JSON解析的數據脫敏系統,包括:
JSON路徑掃描模塊:用于分別解析多個文檔的JSON路徑;
列式轉換模塊:用于根據所述JSON路徑遍歷文檔數據,并將JSON路徑相同的值合并到一個列表,得到列式存儲中間數據;
敏感掃描模塊:用于對所述JSON路徑和所述JSON路徑對應的值分別做敏感掃描,得到敏感JSON路徑列表;
數據脫敏模塊:用于根據所述敏感JSON路徑對所有文檔數據進行遍歷脫敏。
在本發明的一些實施例中,上述JSON路徑掃描模塊抽取一個集合中的多個文檔。
在本發明的一些實施例中,上述JSON路徑包括數組節點和子節點。
在本發明的一些實施例中,上述JSON路徑和所述JSON路徑的值均包括空值。
在本發明的一些實施例中,上述敏感掃描模塊用于在敏感掃描后判斷所述JSON路徑的值的末級名稱、父級結構和敏感類型是否均相同時,將末級名稱、父級結構和敏感類型均相同的多個所述JSON路徑的值進行合并處理。
在本發明的一些實施例中,上述敏感掃描模塊用于將末級名稱、父級結構和敏感類型均相同的多個所述JSON路徑的值合并為末級名稱、父級結構和敏感類型。
在本發明的一些實施例中,上述數據脫敏模塊用于在解析所述JSON路徑和所述JSON路徑的值,當所述JSON路徑和敏感JSON路徑匹配則對值進行脫敏處理。
第二方面,本申請實施例提供一種基于JSON解析的MongoDB脫敏方法,包括如下步驟:
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京中安星云軟件技術有限公司,未經北京中安星云軟件技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110234839.1/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





