[發明專利]任務測試方法、裝置、電子設備及存儲介質

在審

• 申請號: 202011502260.0
• 申請日: 2020-12-18
• 公開（公告）號: CN112631903A
• 公開（公告）日: 2021-04-09
• 發明（設計）人: 闕翔
• 申請（專利權）人: 平安普惠企業管理有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06F9/48
• 代理公司: 深圳市沃德知識產權代理事務所(普通合伙) 44347
• 代理人: 高杰;于志光

任務測試方法、裝置、電子設備及存儲介質。本發明涉及測試領域，揭露了一種任務測試方法，包括：獲取原始數據集，對原始數據集進行格式統一化和掃描區域劃分，得到目標數據集；計算目標數據集中目標數據的信息增益率，根據信息增益率提取出對應目標數據的特征數據，得到特征數據集；利用預設的任務調度框架對特征數據集進行調度任務分配，得到調度任務，在調度任務中加載日志標簽讀取指令；運行調度任務，得到運行結果，利用日志標簽讀取指令識別出運行結果中是否包含日志標簽；若不包含日志標簽，重新對所述特征數據集進行調度任務分配；若包含日志標簽，將運行結果返回至對應的下游用戶。此外，本發明還涉及區塊鏈技術，所述特征數據集可存儲于區塊鏈中。本發明可以提高任務測試的效率。

技術領域

本發明涉及測試領域，尤其涉及一種任務測試方法、裝置、電子設備及計算機可讀存儲介質。

背景技術

互聯網的快速發展催生了大數據時代，移動互聯網的興起，使大數據變得無處不在，基于大數據的基本數據組項目(Basic Data Set Project，BDSP)也由此誕生，所述BDSP項目可以應用于企業的數據信息化管理，幫助企業進行更好的任務分配和執行。

目前，在BDSP項目中的中游系統任務執行完成后，會寫入Hadoop平臺日志標簽，以供下游系統使用判斷，但是，由于中游系統中包含著大量的執行任務結果，若通過人工進行檢測耗費時間比較長，同時需要打入的測試命令較多，從而會影響任務結果測試的效率。

發明內容

本發明提供一種任務測試方法、裝置、電子設備及計算機可讀存儲介質，其主要目的在于提高任務測試的效率。

為實現上述目的，本發明提供的一種任務測試方法，包括：

獲取原始數據集，對所述原始數據集進行格式統一化，得到標準數據集，對所述標準數據集進行掃描區域劃分，得到目標數據集；

計算所述目標數據集中目標數據的信息增益率，根據所述信息增益率提取出對應目標數據的特征數據，得到特征數據集；

利用預設的任務調度框架對所述特征數據集進行調度任務分配，得到調度任務，并在所述調度任務中加載日志標簽讀取指令，運行所述調度任務，得到運行結果；

利用所述日志標簽讀取指令識別出所述運行結果中是否包含日志標簽；

若不包含所述日志標簽，則重新利用所述預設的任務調度框架對所述特征數據集進行調度任務分配；

若包含所述日志標簽，則將所述運行結果返回至對應的下游用戶。

可選地，所述對所述原始數據集進行統一化，得到標準數據集，包括：

讀取所述原始數據集，并判斷所述原始數據集中每個原始數據是否合法；

若所述原始數據不合法，則刪除所述原始數據；

若所述原始數據合法，獲取所述原始數據的數據格式，將所述數據格式轉換為鍵值對格式，得到所述標準數據集。

可選地，所述對所述標準數據集進行掃描區域劃分，得到目標數據集，包括：

獲取所述標準數據集的字段，根據所述字段，及利用預設的自定義語句確定所述標準數據集的掃描區域劃分策略；

根據所述掃描區域劃分策略，利用預設的腳本命令執行所述標準數據集的掃描區域劃分，得到目標數據集。

可選地，所述計算每個所述目標數據集中目標數據的信息增益率，包括：

計算所述目標數據及目標數據集的信息熵，計算所述目標數據的分裂信息量；

根據所述目標數據及目標數據集的信息熵、所述目標數據的分裂信息量，利用所述預構建的信息增益模型計算出所述目標數據的信息增益率。