[發明專利]一種Hive數據遮蔽方法、系統、電子設備及存儲介質

在審

• 申請號: 202110677258.5
• 申請日: 2021-06-18
• 公開（公告）號: CN113343297A
• 公開（公告）日: 2021-09-03
• 發明（設計）人: 于靖力;劉建輝
• 申請（專利權）人: 北京明略昭輝科技有限公司
• 主分類號: G06F21/62
• 分類號: G06F21/62;G06F16/215;G06F16/23;G06F16/242;G06F16/25
• 代理公司: 青島清泰聯信知識產權代理有限公司 37256
• 代理人: 趙燕

本發明提出一種Hive數據遮蔽方法、系統、電子設備及存儲介質，其方法技術方案包括SQL語句接收步驟，在Hive程序的執行過程中接收一SQL語句；語法樹構建步驟，根據所述SQL語句構建一語法樹；數據脫敏遮蔽步驟，將所述語法樹進行脫敏后返回；SQL語句執行步驟，根據脫敏后的所述語法樹創建對應的執行計劃，并根據所述執行計劃執行所述SQL語句，返回所述SQL語句的執行結果。本發明在Hive程序內部對SQL的執行進行干涉，可以在保留原有數據的正確、完整性的前提下，將所有執行的SQL輸出的結果都進行脫敏。

技術領域

本發明屬于數據安全領域，尤其涉及一種Hive數據遮蔽方法、系統、電子設備及存儲介質。

背景技術

數據中臺蓬勃發展，如火如荼，呈現出一片欣欣向榮的繁華景象。但在這片繁花似錦背后，存在一個至關重要的問題，如不解決，便如同達摩克利斯之劍一般，一旦被發現利用，便會引發重大問題，造成極其惡劣的影響。這個問題就是數據的安全與倫理問題。數據中包含著用戶的各種私密信息，如果不加遮掩的任由使用，被別有用心的人利用，將會帶來非常嚴重的后果。

當前，部分公司為了對數據進行一定程度上的去敏感化，采用了多種方式來將原本的敏感數據脫敏。其中包括，在ETL數據清洗階段對數據進行脫敏，或在提交查詢語句階段對語句進行改造進行脫敏。但是，改造SQL的方式過于粗暴，且改造方案并不一定適用于所有SQL，會有某些SQL在改造后執行失敗或執行計劃發生變更，不能保證正確性。在ETL數據清洗階段對數據進行脫敏則將接入的原始數據修改，破壞了數據的完整性和準確性，丟失了一定的數據信息。

發明內容

本申請實施例提供了一種Hive數據遮蔽方法、系統、電子設備及存儲介質，以至少解決現有Hive數據遮蔽方法無法保留原始值的問題。

第一方面，本申請實施例提供了一種Hive數據遮蔽方法，包括：SQL語句接收步驟，在Hive程序的執行過程中接收一SQL語句；語法樹構建步驟，根據所述SQL語句構建一語法樹；數據脫敏遮蔽步驟，將所述語法樹進行脫敏后返回；SQL語句執行步驟，根據脫敏后的所述語法樹創建對應的執行計劃，并根據所述執行計劃執行所述SQL語句，返回所述SQL語句的執行結果。

優選的，所述語法樹構建步驟進一步包括：將所述SQL語句劃分為一樹形結構，并將所述SQL語句所操作的對象及操作類型進行節點解析，根據解析得到的所述節點構建所述語法樹。

優選的，所述數據脫敏遮蔽步驟進一步包括：預設權限定義步驟，根據一脫敏需求定義一預設權限，根據所述預設權限對所述語法樹進行數據遮蔽。

優選的，所述數據脫敏遮蔽步驟進一步包括：脫敏函數配置步驟，根據所述預設權限，將所述語法樹內需要進行所述脫敏的所述節點配置脫敏函數以進行脫敏。

第二方面，本申請實施例提供了一種Hive數據遮蔽系統，適用于上述一種Hive數據遮蔽方法，包括：SQL語句接收模塊，在Hive程序的執行過程中接收一SQL語句；語法樹構建模塊，根據所述SQL語句構建一語法樹；數據脫敏遮蔽模塊，將所述語法樹進行脫敏后返回；SQL語句執行模塊，根據脫敏后的所述語法樹創建對應的執行計劃，并根據所述執行計劃執行所述SQL語句，返回所述SQL語句的執行結果。

在其中一些實施例中，所述語法樹構建模塊進一步包括：將所述SQL語句劃分為一樹形結構，并將所述SQL語句所操作的對象及操作類型進行節點解析，根據解析得到的所述節點構建所述語法樹。

在其中一些實施例中，所述數據脫敏遮蔽模塊進一步包括：預設權限定義單元，根據一脫敏需求定義一預設權限，根據所述預設權限對所述語法樹進行數據遮蔽。

在其中一些實施例中，所述數據脫敏遮蔽模塊進一步包括：脫敏函數配置單元，根據所述預設權限，將所述語法樹內需要進行所述脫敏的所述節點配置脫敏函數以進行脫敏。