[發明專利]大數據平臺BI元數據管理的方法和裝置

有效

• 申請號: 201710770340.6
• 申請日: 2017-08-31
• 公開（公告）號: CN109446274B
• 公開（公告）日: 2022-04-12
• 發明（設計）人: 楊澤森;王彥明;趙鵬
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/28
• 分類號: G06F16/28;G06F16/2457
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;陸錦華

1.一種大數據平臺BI元數據管理的方法，其特征在于，包括：

在所述大數據平臺上配置調度任務，基于每個所述調度任務的調度結果生成與每個目標數據模型對應的BI數據模型；

基于每個所述調度任務對應的BI元數據，確定各個所述調度任務之間的依賴關系；

依據所述依賴關系，確定各個所述BI數據模型之間的血緣關系；從所述BI數據模型中，獲取所述BI數據模型的模型信息；

其中，每個所述調度任務對應一個所述目標數據模型。

2.如權利要求1所述的方法，其特征在于，所述調度任務包括以下任意一種：

數據采集任務，用于采集所述大數據平臺上的BI元數據；

數據加工任務，用于按照預設的規則對采集到的BI元數據進行轉換；

數據挖掘任務，用于按照預設的規則對轉換后的BI元數據進行分析。

3.如權利要求1所述的方法，其特征在于，進一步包括：對所述BI數據模型中的模型信息進行編輯或評論。

4.如權利要求1所述的方法，其特征在于，進一步包括：基于所述基于大數據平臺上的BI元數據確定每個用戶的訪問權限；所述訪問權限包括以下至少之一：對所述目標數據模型的訪問權限，對數據倉庫的訪問權限。

5.如權利要求1所述的方法，其特征在于，

采用統一的腳本模板編寫每個所述調度任務的任務腳本；和/或，

采用統一的命名規范確定每個所述調度任務的任務名稱；和/或，

所述調度任務的任務腳本中包含與所述調度任務對應的目標數據模型的唯一性標識，所述唯一性標識設置在所述腳本模板的預設參數位置。

6.如權利要求1所述的方法，其特征在于，進一步包括：

根據用戶的訪問請求，將與所述訪問請求對應的操作日志和訪問結果存儲至關系型數據庫；

所述訪問結果包括以下至少之一：所述BI數據模型的模型信息，各個所述BI數據模型之間的血緣關系。

7.如權利要求1所述的方法，其特征在于，所述BI數據模型的模型信息包括以下至少之一：模型負責人、模型創建時間、模型結構修改時間、模型分區、模型用途、共享到的數據集市范圍、模型的血緣關系、模型類型、用戶評論、使用實例。

8.一種大數據平臺BI元數據管理的裝置，其特征在于，包括：

調度采集模塊，用于在所述大數據平臺上配置調度任務；其中，每個所述調度任務對應一個目標數據模型；

數據倉庫，用于：基于每個所述調度任務的調度結果生成與每個目標數據模型對應的BI數據模型；基于每個所述調度任務對應的BI元數據，確定各個所述調度任務之間的依賴關系；

數據應用模塊，用于：依據所述依賴關系，確定各個所述BI數據模型之間的血緣關系；從所述BI數據模型中，獲取所述BI數據模型的模型信息。

9.如權利要求8所述的裝置，其特征在于，所述調度任務包括以下任意一種：

數據采集任務，用于采集所述大數據平臺上的BI元數據；

數據加工任務，用于按照預設的規則對采集到的BI元數據進行轉換；

數據挖掘任務，用于按照預設的規則對轉換后的BI元數據進行分析。

10.如權利要求8所述的裝置，其特征在于，進一步包括：

元數據管理模塊，用于對所述BI數據模型中的模型信息進行編輯或評論。

11.如權利要求8所述的裝置，其特征在于，進一步包括：

權限控制模塊，用于基于所述基于大數據平臺上的BI元數據確定每個用戶的訪問權限；

所述訪問權限包括以下至少之一：對所述目標數據模型的訪問權限，對所述數據倉庫的訪問權限。