[發明專利]一種數據分析的方法和裝置

有效

• 申請號: 201710002591.X
• 申請日: 2017-01-03
• 公開（公告）號: CN108268558B
• 公開（公告）日: 2020-12-04
• 發明（設計）人: 尹華華;錢嶺;趙立芬;劉超;范琴
• 申請（專利權）人: 中移(蘇州)軟件技術有限公司;中國移動通信集團公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458;G06F16/22;G06F21/62
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 沈寒酉;張穎玲

1.一種數據分析的方法，其特征在于，所述方法包括：

構建原始數據元數據與脫敏數據元數據之間的映射關系；

在確定數據使用請求合法后，將所述數據使用請求中用于執行數據操作的原始結構化查詢語言SQL語句進行解析；

當所述原始SQL語句針對脫敏數據時，根據所述映射關系將所述SQL語句進行轉換；

通過所述轉換后的SQL語句對所述脫敏數據對應的原始數據進行關聯分析；

根據所述關聯分析的數據結果進行數據分析，并將所述數據分析的結果進行返回。

2.根據權利要求1所述的方法，其特征在于，所述構建原始數據元數據與脫敏數據元數據之間的映射關系，具體包括：

定義元數據的存儲結構；其中，所述元數據用于描述數據；

當確定有需要脫敏的原始數據時，定義脫敏元數據的存儲結構；

建立所述原始數據元數據與脫敏數據元數據之間的映射關系。

3.根據權利要求2所述的方法，其特征在于，所述方法還包括：

當所述需要脫敏的原始數據加載到數據平臺時，將所述原始數據進行脫敏；

將所述原始數據以及所述原始數據對應的脫敏數據均加載至所述數據平臺。

4.根據權利要求3所述的方法，其特征在于，所述方法還包括：

對脫敏元數據構建數據索引，使得用戶通過搜索引擎針對所述數據索引搜索到脫敏元數據。

5.根據權利要求1所述的方法，其特征在于，所述將所述數據使用請求中用于執行數據操作的原始SQL語句進行解析，具體包括：

解析用戶執行數據操作的原始SQL語句，分析得到所述SQL語句所使用的數據表的列信息。

6.根據權利要求1所述的方法，其特征在于，所述根據所述映射關系將所述SQL語句進行轉換，具體包括：

根據所述SQL語句以及所述映射關系，通過預設的轉換策略獲得轉換后的SQL語句；其中，所述預設的轉換策略包括：在所述SQL語句中的以下子句中將所述脫敏數據替換成所述脫敏數據對應的原始數據：

Where子句、Group By子句和Having子句以及Order By子句。

7.一種數據分析的裝置，其特征在于，所述裝置包括：構建模塊、確權模塊、解析模塊、轉換模塊、數據分析模塊；其中，

所述構建模塊，用于構建原始數據元數據與脫敏數據元數據之間的映射關系；

所述確權模塊，用于確定數據使用請求是否合法；并當所述數據使用請求合法時，觸發所述解析模塊；

所述解析模塊，用于將所述數據使用請求中用于執行數據操作的原始SQL語句進行解析；

所述轉換模塊，用于當所述原始結構化查詢語言SQL語句針對脫敏數據時，根據所述映射關系將所述SQL語句進行轉換；

所述數據分析模塊，用于通過所述轉換后的SQL語句對所述脫敏數據對應的原始數據進行關聯分析；以及，根據所述關聯分析的數據結果進行數據分析，并將所述數據分析的結果進行返回。

8.根據權利要求7所述的裝置，其特征在于，所述構建模塊，用于：

定義元數據的存儲結構；其中，所述元數據用于描述數據；

當確定有需要脫敏的原始數據時，定義脫敏元數據的存儲結構；

建立所述原始數據元數據與脫敏數據元數據之間的映射關系。

9.根據權利要求8所述的裝置，其特征在于，所述構建模塊，還用于：

當所述需要脫敏的原始數據加載到數據平臺時，將所述原始數據進行脫敏；

以及，將所述原始數據以及所述原始數據對應的脫敏數據均加載至所述數據平臺。

10.根據權利要求9所述的裝置，其特征在于，所述構建模塊，還用于：

對脫敏元數據構建數據索引，使得用戶通過搜索引擎針對所述數據索引搜索到脫敏元數據。