[發明專利]異構源數據處理方法、裝置、存儲介質和電子設備

在審

• 申請號: 201911019822.3
• 申請日: 2019-10-24
• 公開（公告）號: CN110851495A
• 公開（公告）日: 2020-02-28
• 發明（設計）人: 魏強;孫向學;王丹寧;張上亞;翟勝強
• 申請（專利權）人: 長城計算機軟件與系統有限公司
• 主分類號: G06F16/2458
• 分類號: G06F16/2458
• 代理公司: 北京立緯知識產權代理有限公司 11826
• 代理人: 徐麗昕

本公開實施例是關于一種異構源數據處理方法、裝置、計算機可讀存儲介質和電子設備。該方法包括：獲取各異構系統的原始數據文件；根據預設的業務邏輯關聯規則對原始數據文件分析處理，以將原始數據文件中的原始數據按照預設存儲格式關聯存儲形成標準數據文件；響應第一查詢操作而從所述標準數據文件中獲取相應查詢的數據并統計分析查詢的數據。本公開實施例可以對異構源數據進行了統一處理，使其能夠更方便地進行整合，實現異構源數據資源的統一管理，節省了時間和人力成本。可從多維度對異構源數據進行查詢分析，可以直接用于統計、分析挖掘，運用起來更加靈活。

技術領域

本公開實施例涉及數據處理技術領域，尤其涉及一種異構源數據處理方法、異構源數據處理裝置、實現異構源數據處理方法的計算機可讀存儲介質和電子設備。

背景技術

隨著大數據相關技術的發展，越來越多的人注意到大數據下潛藏著巨大的經濟價值。各種異構的數據源急需整合起來，提供給從事大數據分析工作的人，對數據進行分析和挖掘，創造數據的更大價值。

但是目前對各個異構的數據源的數據的處理標準并不統一，這就給異構數據源的整合工作帶來的巨大的困難和挑戰。

因此，有必要改善上述相關技術方案中存在的一個或者多個問題。

需要說明的是，在上述背景技術部分公開的信息僅用于加強對本公開的背景的理解，因此可以包括不構成對本領域普通技術人員已知的現有技術的信息。

發明內容

本公開實施例的目的在于提供一種異構源數據處理方法、裝置、計算機可讀存儲介質和電子設備，進而至少在一定程度上克服由于相關技術的限制和缺陷而導致的一個或者多個問題。

根據本公開實施例的第一方面，提供一種異構源數據處理方法，該方法包括：

獲取各異構系統的原始數據文件；

根據預設的業務邏輯關聯規則對原始數據文件分析處理，以將原始數據文件中的原始數據按照預設存儲格式關聯存儲形成標準數據文件；

響應第一查詢操作而從所述標準數據文件中獲取相應查詢的數據并統計分析查詢的數據。

本公開的一種示例性實施例中，該方法還包括：

在根據預設的業務邏輯關聯規則對原始數據文件分析處理時，根據預設的數據描述模板確定存儲至標準數據文件中的原始數據的業務含義。

本公開的一種示例性實施例中，所述獲取各異構系統的原始數據文件的步驟，包括：

響應一預設操作而展示一查詢頁面，該查詢頁面用以指示查詢原始數據；

接收在所述查詢頁面輸入的第二查詢操作，響應于該第二查詢操作而展示獲取的原始數據文件；其中，所述原始數據文件包括文件名、文件類型、上傳時間、文件來源和上傳者信息中的一個或多個。

本公開的一種示例性實施例中，該方法還包括：

在將原始數據文件中的原始數據按照預設存儲格式關聯存儲形成標準數據文件時，至少通過新增、刪除、拖放或保存操作來完成數據存儲過程。

本公開的一種示例性實施例中，所述預設的業務邏輯關聯規則包括與不同的原始數據文件的文件類型對應關聯的子業務邏輯關聯規則；相應的，所述根據預設的業務邏輯關聯規則對原始數據文件分析處理的步驟，包括：

確定所述原始數據文件的文件類型；

當確定文件類型為第一類型時，通過第一子業務邏輯關聯規則對所述原始數據文件的數據進行處理；該第一子業務邏輯關聯規則包含原始數據文件中的數據列中的變量和元數據系統中變量的業務邏輯關聯規則；