[發明專利]一種醫療數據治理中質控和任務調度的解耦處理方法

在審

• 申請號: 202110079381.7
• 申請日: 2021-01-21
• 公開（公告）號: CN112734281A
• 公開（公告）日: 2021-04-30
• 發明（設計）人: 馬良;劉芳;陳超;張莉;宗娜;尹超
• 申請（專利權）人: 山東健康醫療大數據有限公司
• 主分類號: G06Q10/06
• 分類號: G06Q10/06;G06Q10/10;G06Q50/22
• 代理公司: 濟南信達專利事務所有限公司 37100
• 代理人: 姜明

本發明公開了一種醫療數據治理中質控和任務調度的解耦處理方法，屬于數據治理技術領域。本發明的醫療數據治理中質控和任務調度的解耦處理方法，將質控和任務調度進行分離，使質控和任務調度各自執行，根據主題庫的個性化需求進行質控問題數據匯總，在主題庫中形成主題數據及質控的問題匯總數據，主題數據和問題匯總數據結合實現數據的應用服務。該發明的醫療數據治理中質控和任務調度的解耦處理方法能夠減少復雜的流程，還可以避免同一份數據多次相同質控的問題，提高質控效率，具有很好的推廣應用價值。

技術領域

本發明涉及數據治理技術領域，具體提供一種醫療數據治理中質控和任務調度的解耦處理方法。

背景技術

數據治理是按照平臺既有標準對數據采集合理化處理，對數據的獲取、處理、使用進行監管。

歸一庫是數據治理進行表歸一、字段歸一和字典標準化后形成的數據集合。

主題庫是根據應用需求從歸一庫中取出所需數據并對該數據進行質量評估后形成的可以正常滿足應用需求的數據集合。

質量評估是是對歸一庫中數據進行多項業務規則的質控，形成質控合格和不合格數據清單。業務規則是質控的業務單元，從及時性，完整性，正確性，關聯性，邏輯性等多個維度進行設定。不同的應用需求對數據質量的要求不同，需要質控的業務規則也會不同，因此質控的范圍是根據主題庫的應用制定的，具有個性化。

目前常規的歸一庫入主題庫數據流程如圖1所示，第一步，數據從歸一庫中根據需求取出數據進行各項業務規則的質控評估，把質控結果分為質控合格數據的事件號和不合格數據的事件號。第二步，根據質控合格數據的事件號取出合格數據進入主題庫中。該方式有兩個明顯的缺點，一是把個性化需求的質量評估過程放入整個歸一庫到主題庫的數據流轉過程中，使得對該主題庫的任務調度過程變得個性化，無法抽象出通用的流程。二是不同的主題庫需求只是對質控的業務規則范圍提出個性化，不同的主題庫對同一個業務規則的質控是完全相同的，這樣如果有多個主題庫，那就會對同一份數據同一個規則進行多次質控造成質控重復，浪費資源和降低效率。

發明內容

本發明的技術任務是針對上述存在的問題，提供一種能夠減少復雜的流程，還可以避免同一份數據多次相同質控的問題，提高質控效率的醫療數據治理中質控和任務調度的解耦處理方法。

為實現上述目的，本發明提供了如下技術方案：

一種醫療數據治理中質控和任務調度的解耦處理方法，該方法將質控和任務調度進行分離，使質控和任務調度各自執行，根據主題庫的個性化需求進行質控問題數據匯總，在主題庫中形成主題數據及質控的問題匯總數據，主題數據和問題匯總數據結合實現數據的應用服務。

既可以把質控和任務調度分離做成通用性流程，減少流程復雜性，又可以避免同一份數據多次相同質控的問題，提高質控效率。

作為優選，該醫療數據治理中質控和任務調度的解耦處理方法具體包括以下步驟：

S1、任務調度取出歸一庫中符合主題庫需求的字段數據入主題表中；

S2、質量評估任務對全量數據和增量數據進行質控業務規則的評估，形成歸一庫數據在各質控業務規則下合格不合格的數據清單表；

S3、主題庫質控數據應用處理。

作為優選，步驟S1中，根據應用需求確定標準數據集合，形成主題表的集合。

作為優選，根據目標主題表的字段，編寫sql形成從歸一庫中取出主題表所需的各個字段數據的腳本。

作為優選，通過任務調度程序，執行sql語句，取出符合主題表字段的數據入主題庫的各個表中，其中主題表中包含全量數據和增量數據。

作為優選，步驟S3中，針對各個主題庫，選擇質控業務規則作為各自的質控規則形成表。