[發明專利]基于ETL的數據分析方法、裝置、設備和存儲介質

在審

• 申請號: 202010883989.0
• 申請日: 2020-08-28
• 公開（公告）號: CN111966394A
• 公開（公告）日: 2020-11-20
• 發明（設計）人: 孫亞萌;胡松青;龍富永;彭玉艷;黃寧飛;張紅燕
• 申請（專利權）人: 珠海格力電器股份有限公司;珠海聯云科技有限公司
• 主分類號: G06F8/71
• 分類號: G06F8/71;G06F16/25
• 代理公司: 北京聿宏知識產權代理有限公司 11372
• 代理人: 吳大建;陳敏

本發明公開了一種基于ETL的數據分析方法裝置、設備和存儲介質，方法包括：獲取ETL工具的類型；根據預設的ETL工具類型與可配置作業參數的關聯關系，輸出與ETL工具的類型相對應的可配置作業參數；若可配置作業參數已完成配置，且可配置作業參數對應的填寫內容滿足預設的調度條件，利用與ETL工具對應的調度工具的調度參數，對目標ETL任務進行調度，以執行目標ETL任務，實現了使用者僅需輸入ETL工具的類型的情況下，自動輸出與ETL工具的類型相對應的可配置作業參數，避免使用者花費大量時間去學習各種ETL工具，降低學習成本，且配置ETL工具的作業參數時，不易出現錯誤，提高ETL工具的作業參數的配置效率，進而提高了數據分析的質量。

技術領域

本發明屬于數據分析技術領域，具體涉及一種基于ETL的數據分析方法、裝置、設備和存儲介質。

背景技術

ETL，是英文Extract-Transform-Load的縮寫，用來描述將數據從來源端經過抽取(extract)、交互轉換(transform)、加載(load)至目的端的過程。ETL是構建數據倉庫的重要一環，使用者從數據源抽取出所需的數據，經過數據清洗，最終按照預先定義好的數據倉庫模型，將數據加載到數據倉庫中去。

目前，數據分析領域可使用的ETL工具類型眾多，導致使用者在配置ETL工具的作業參數時，往往需要熟知各種ETL工具的作業參數才能順利配置，這就使得使用者需要花費大量時間去學習各種ETL工具，學習成本較高，且在實際配置ETL工具的作業參數時，容易出現錯誤，降低了ETL工具的作業參數的配置效率，進而降低了數據分析的質量。

發明內容

本發明的主要目的是提供一種基于ETL的數據分析方法、裝置、設備和存儲介質，以解決現有技術中ETL工具的作業參數的配置效率較低，進而降低了數據分析的質量的問題。

針對上述問題，本發明提供了一種基于ETL的數據分析方法，包括：

獲取ETL工具的類型；

根據預設的ETL工具類型與可配置作業參數的關聯關系，輸出與所述ETL工具的類型相對應的可配置作業參數；

若所述可配置作業參數已完成配置，檢測與所述可配置作業參數對應的填寫內容是否滿足預設的調度條件；

若所述可配置作業參數對應的填寫內容滿足預設的調度條件，利用與所述ETL工具對應的調度工具的調度參數，對目標ETL任務進行調度，以執行所述目標ETL任務。

進一步地，上述所述的基于ETL的數據分析方法中，若所述可配置作業參數對應的填寫內容滿足預設的調度條件，利用與所述ETL工具對應的調度工具的調度參數，對目標ETL任務進行調度之前，還包括：

獲取調度工具的類型；

根據預設的調度工具類型與可配置調度參數的關聯關系，輸出與所述調度工具的類型相對應的可配置調度參數；

響應所述可配置調度參數對應的填寫內容，生成所述ETL工具對應的調度工具的調度參數。

進一步地，上述所述的基于ETL的數據分析方法中，獲取調度工具的類型，包括：

響應針對調度工具的設置內容，生成所述調度工具的類型。

進一步地，上述所述的基于ETL的數據分析方法中，獲取調度工具的類型，包括：

根據預設的ETL工具的類型與調度工具的類型的關聯關系，輸出至少一個建議調度工具的類型；

響應針對至少一個建議調度工具的類型的選擇操作，生成所述調度工具的類型。

進一步地，上述所述的基于ETL的數據分析方法中，所述預設的調度條件包括：