[發明專利]基于Kudu的數據分析裝置和方法

有效

• 申請號: 202110006136.3
• 申請日: 2021-01-05
• 公開（公告）號: CN112667755B
• 公開（公告）日: 2022-09-13
• 發明（設計）人: 謝奧;高嫻;王亞鵬
• 申請（專利權）人: 浪潮通信技術有限公司
• 主分類號: G06F16/28
• 分類號: G06F16/28;G06F16/245
• 代理公司: 濟南信達專利事務所有限公司 37100
• 代理人: 孫園園

1.一種基于Kudu的數據分析裝置，其特征在于，該裝置包括，

圖譜數據導入模塊，用于從Kudu系統中存儲的數據獲取，并根據建模管理控制模塊中的對象、屬性、關系為核心要素的本體數據模型定義實現外部結構化數據及非結構化數據的多源異構數據的融合；

建模管理控制模塊，用于以對象、屬性、關系為核心要素建立統一的本體數據模型，從管理視角直觀查看模型定義的模型視圖，建立物理數據表到本體數據模型中對象、屬性、關系映射的源數據建模以及高級搜索配置的管理功能；

圖譜引擎模塊，用于提供圖譜數據存儲引擎和索引數據存儲引擎，將分析處理后的大數據根據對象、屬性和關系的示例數據進行存儲，并存儲索引數據；

智能服務模塊，用于為用戶提供智能功能。

2.根據權利要求1所述的基于Kudu的數據分析裝置，其特征在于，所述智能服務模塊提供的額外的智能功能包括基于知識圖譜技術的智能搜索、圖譜展現、關聯分析及圖譜統計。

3.根據權利要求1或2所述的基于Kudu的數據分析裝置，其特征在于，所述本體數據模型的功能包括定義對象類型、定義關系類型和定義屬性類型；

其中，定義對象類型是指對一個對象詳細信息的定義；對象詳細信息包括對象名稱、URI、對象屬性和子對象的定義；

定義屬性類型是指定義對象基本屬性；對象的基本屬性定義包括定義屬性顯示標題、URI、數據格式、數值類型及同義詞；

定義關系類型是指定義關系分類、關系類型以及關系的屬性信息。

4.根據權利要求3所述的基于Kudu的數據分析裝置，其特征在于，新建對象類型、關系類型和屬性類型的配置入口包括如下兩種情況中的至少一種：

①、本體數據模型：通過本體數據模型管理中的對象類型、屬性類型和關系類型，新建業務邏輯對象、屬性及關系；

②、數據源：新建物理表到對象及關系的映射信息。

5.根據權利要求1所述的基于Kudu的數據分析裝置，其特征在于，該裝置的工作過程具體如下：

（1）、數據流從Kudu系統中導入圖譜數據導入模塊中；

（2）、圖譜數據導入模塊將數據導入建模管理控制模塊中，對數據進行分析處理并建立數據關聯；

（3）、通過智能服務模塊進行賦能智能服務；

（4）、把處理好的數據通過圖譜引擎模塊傳回Kudu數據庫中。

6.一種基于Kudu的數據分析方法，其特征在于，該方法是將知識圖譜技術應用于Kudu系統中，用于輔助及加深數據間關聯的數據分析功能；具體如下：

以對象、屬性、關系為核心要素進行本體數據模型的建立，同時從Kudu系統中獲取原始信息數據庫，通過圖譜數據導入模塊根據建模管理控制模塊已定義的本體數據模型完成對Kudu系統中對象數據的獲取與融合；

基于本體數據模型要素信息，從原始信息數據庫中提取圖譜數據：利用建模管理控制模塊對經過處理后的對象數據進行數據分析，通過本體數據模型對數據本體定義屬性類型、對象類型及關系類型；

進行物理數據表到本體數據模型中對象、屬性及關系映射的源數據建模；

通過智能服務模塊對本體數據模型進行智能服務賦能，基于本體數據模型和圖譜關系模型提供交互式可視化的探索式關聯分析；

通過圖譜引擎模塊將分析處理后的數據及關聯關系存儲于Kudu系統中。

7.根據權利要求6所述的基于Kudu的數據分析方法，其特征在于，智能服務賦能是指根據不同用戶的需求，讓用戶自行對圖譜數據進行探索，結合已構建好的圖譜知識及關聯關系，根據業務需求進行額外增加關聯關系及從其他維度對數據進行分析的數據分析服務。