[發明專利]數據融合方法及裝置，基于元信息的數據處理方法和裝置在審

申請號：	201910180797.0	申請日：	2019-03-11
公開（公告）號：	CN111680030A	公開（公告）日：	2020-09-18
發明（設計）人：	王燁;周祥	申請（專利權）人：	阿里巴巴集團控股有限公司
主分類號：	G06F16/22	分類號：	G06F16/22;G06F16/25
代理公司：	北京清源匯知識產權代理事務所(特殊普通合伙) 11644	代理人：	馮德魁;竇曉慧
地址：	英屬開曼群島大開***	國省代碼：	暫無信息
權利要求書：	查看更多	說明書：	查看更多
摘要：
搜索關鍵詞：	數據融合方法裝置基于信息數據處理
鉆瓜網技術展會專利詞庫專利權人專利榜在售專利公布日期熱門專利

【說明書】：

本申請公開一種數據融合方法及裝置，基于元信息的數據處理方法及裝置，一種數據處理方法，以及計算機存儲介質和電子設備。其中，所述數據融合方法包括：獲取數據源中用于描述數據屬性的元信息；根據所述數據源中數據的元信息，生成元信息表結構；根據所述元信息表結構與用于描述所述數據源中數據內容的數據表，生成融合有所述元信息的數據表；進而使得生成的融合有所述元信息的數據表中能夠包括有元信息的相關內容，以便對數據源中的數據進行分析時也可以對數據的元信息進行查詢、分析等相關操作。

技術領域

本申請涉及計算機應用領域，具體涉及一種數據融合方法及裝置，以及一種基于元信息的數據處理方法及裝置。本申請同時涉及一種數據處理方法；以及涉及一種計算機存儲介質和電子設備。

背景技術

在傳統的關系型數據庫中，用戶定義一個表，然后會持續的讀寫表內數據，但是對于表本身相關的元信息并不能提供查詢，不能與表內數據融合在一起查詢，因為大部分時候業務上沒有這樣的需求。

隨著互聯網的不斷發展，大數據已然成為生活中不可或缺的內容。在數據湖場景中，海量的元信息本身也是大數據的重要來源，用戶對于不同數據源中的元信息也有查詢的需求。在這樣的背景下，用戶就會有關聯分析各種數據的需求，同時對這些數據所對應的元信息數據，也有相關的分析需求。用戶希望能夠把數據庫表的某些元信息作為列的方式輸出到最后的結果集中去。在不支持元信息融合業務數據分析前，唯一的方法是把所有這些元信息寫到表的列中然后再分析，但是這種方式有以下問題：

1)寫到表中的元信息構成大量的冗余信息，進而導致存儲空間變得很大，而且這些大量的冗余信息大部分內容都是重復的；

2)這些信息很難變更，如果要變則需要將所有記錄都變更，等等。

基于上述內容，如何對元信息的數據分析，以及將元信息與源數據結合進行數據分析成為本領域技術人員需要解決技術問題。

發明內容

本申請提供一種數據融合方法，以解決現有技術中無法針對元信息與源數據結合進行分析的問題。

本申請提供一種數據融合方法，包括：

獲取數據源中用于描述數據屬性的元信息；

根據所述數據源中數據的元信息，生成元信息表結構；

根據所述元信息表結構與用于描述所述數據源中數據內容的數據表，生成融合有所述元信息的數據表。

在一些實施例中，所述根據所述數據源中數據的元信息，生成元信息表結構，包括：

根據所述數據源中數據的元信息設置所述元信息表結構的列信息；

根據所述列信息，生成所述元信息表結構。