[發明專利]一種數據比對方法及系統、任務控制器、存儲介質

在審

• 申請號: 202110055220.4
• 申請日: 2021-01-15
• 公開（公告）號: CN112835891A
• 公開（公告）日: 2021-05-25
• 發明（設計）人: 李繼勇
• 申請（專利權）人: 卓望數碼技術（深圳）有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F16/23;G06F16/25
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 黃廣龍

本申請公開了一種數據比對方法及系統、任務控制器、存儲介質，該方法包括：獲取數據比對任務的配置信息，并控制采集引擎利用配置信息指定的采集引擎插件采集源數據和目標數據。之后，控制比對引擎利用配置信息指定的比對引擎插件對源數據和目標數據進行比對，獲得比對結果。最后，控制處理引擎利用配置信息指定的處理引擎插件對比對結果進行處理，獲得處理結果。本申請對采集引擎、比對引擎和處理引擎進行統一控制，提供了模板化的數據比對控制機制，無需針對不同信息系統和數據模型的差異進行重復性的機制開發與調整，因此改善了數據比對的效率。

技術領域

本申請涉及數據處理技術領域，特別涉及一種數據比對方法及系統、任務控制器、存儲介質。

背景技術

現代信息網絡中，不同的信息系統之間會存在一定數量的數據交易服務。為了保證數據交易服務的數據一致性，需要定時對交易雙方的信息系統進行交易數據比對及更新處理。實踐中發現，由于不同信息系統的交易數據來源方式、數據記錄格式、數據比對方式和比對結果輸出方式等存在各種各樣的差異，導致各個信息系統內的數據比對機制無法通用，因此現有技術需要針對不同信息系統和數據模型的差異進行重復性的機制開發與調整，使得數據比對的效率較低。

申請內容

本申請旨在至少解決現有技術中存在的技術問題之一。為此，本申請提出一種數據比對方法及系統、任務控制器、存儲介質，能夠提高數據比對的效率。

根據本申請的第一方面實施例的一種數據比對方法，包括：

獲取數據比對任務的配置信息；控制采集引擎利用所述配置信息指定的采集引擎插件采集源數據和目標數據；控制比對引擎利用所述配置信息指定的比對引擎插件對所述源數據和所述目標數據進行比對，獲得比對結果；控制處理引擎利用所述配置信息指定的處理引擎插件對所述比對結果進行處理，獲得處理結果。

根據本申請實施例的一種數據比對方法，至少具有如下有益效果：

本申請實施例中，通過采用采集引擎、比對引擎和處理引擎分別執行數據采集、數據比對和數據處理流程，對采集引擎、比對引擎和處理引擎進行統一控制，提供了模板化的數據比對控制機制。基于此，結合配置信息的指示，控制采集引擎、比對引擎和處理引擎直接調用符合業務配置需求的插件進行數據采集、比對和處理，無需針對不同信息系統和數據模型的差異進行重復性的機制開發與調整，因此改善了數據比對的效率，并且還能夠適用于多種個性化的業務需求，進而提高了數據比對機制的通用性和靈活性。

根據本申請的一些實施例，所述獲取數據比對任務的配置信息，包括：

當接收到任務管理器發送的數據比對任務時，獲取所述數據比對任務對應的配置信息，所述任務管理器以插件形式運行。

根據本申請的一些實施例，所述采集引擎插件包括源數據采集器和目標數據采集器；所述控制采集引擎利用所述配置信息指定的采集引擎插件采集比對數據，包括：

根據所述配置信息，生成數據采集請求，所述數據采集請求用于指示采集引擎利用所述源數據采集器采集源數據以及利用所述目標數據采集器采集目標數據；向所述采集引擎發送所述數據采集請求；從所述采集引擎獲得所述源數據和所述目標數據。

根據本申請的一些實施例，所述采集引擎插件還包括源數據解析器和目標數據解析器；所述數據采集請求還用于指示所述采集引擎在采集所述源數據和所述目標數據之后，利用所述源數據解析器對所述源數據進行數據解析轉換以及利用所述目標數據解析器對所述目標數據進行數據解析轉換，獲得統一格式后的源數據和目標數據；

所述從所述采集引擎獲得所述源數據和所述目標數據，包括：從所述采集引擎獲得所述統一格式后的源數據和目標數據。

根據本申請的一些實施例，所述控制比對引擎利用所述配置信息指定的比對引擎插件對所述源數據和所述目標數據進行比對，獲得比對結果，包括：