[發明專利]一種數據處理方法、裝置、計算機設備和計算機可讀存儲介質

有效

• 申請號: 202110677339.5
• 申請日: 2021-06-18
• 公開（公告）號: CN113407522B
• 公開（公告）日: 2022-02-01
• 發明（設計）人: 吳丹楓
• 申請（專利權）人: 上海市第十人民醫院
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/21;G06F16/23;G06F16/242;G06F16/25;G06F16/28;G06F21/64
• 代理公司: 上海領譽知識產權代理有限公司 31383
• 代理人: 王琰

1.一種數據處理方法，其特征在于，包括：

確定數據采集方式，所述數據采集方式包括：利用數據接口采集、利用復制訂閱的方式采集以及利用SSIS的方式采集；

利用數據采集管理系統，按照所述采集方式從數據中心采集各醫院信息系統的各個應用子系統的原始數據，并將采集到的原始數據進行數據清洗和數據轉換，將得到的目標數據進行分類存儲，所述數據采集管理系統具有如下功能：數據采集、采集腳本配置、采集調度與監控、消息持久化、主被動群集模式、數據驗證服務、數據錯誤處理機制、消息跟蹤機制、連接重建機制、消息重發機制、重復消息檢測機制、錯誤消息驗證機制、錯誤應答處理機制、基于數據中心的數據訪問服務、運維監控、通知機制以及監測列表，所述數據清洗表示過濾不符合要求的數據，所述數據轉換包括不一致數據的轉換、數據粒度的轉換以及商務規則的轉換；

其中，所述數據接口是所述數據采集管理系統的數據接口管理模塊提供的，在按照所述采集方式從數據中心采集各醫院信息系統的各個應用子系統的原始數據，并將采集到的原始數據進行數據清洗和數據轉換，將得到的目標數據進行分類存儲的過程中，所述方法還包括通過所述數據接口管理模塊執行如下流程：

執行接口編輯流程：依據獲取的模板代表的領域知識來編輯數據接口信息；

執行數據接口管理流程：進行數據接口基本信息的查詢，數據接口生命周期狀態的管理以及版本管理，數據接口的生命周期狀態有創建、發布、鎖定以及棄用，模板部署后基本數據接口初始狀態為創建，對新部署的模板進行判斷，如果沒有部署過，則將創建的基本數據接口的狀態更新為發布，如果是模板版本更新后部署，則將模板與之前版本進行比較，如果兼容，基本數據接口則將上一版本更新為棄用，如果不兼容，則將上一版本更新為鎖定，將新創建的基本數據接口版本升級，狀態更改為發布，用戶自定義數據接口初始狀態為創建，用戶提交后，由管理員進行審核，審核通過后將狀態更新為發布，否決后返回創建狀態，若用戶是在巳經發布的數據接口上進行版本更新，則將當前版本更新為棄用，將新版本的狀態更新為創建，處于創建狀態的數據接口可由用戶自行修改；

執行數據接口展示流程：提供數據接口的在線說明文檔，將數據接口信息解析，按照模板分類展示基于該模板的數據接口資源名稱，根據資源名稱和版本信息顯示每個請求方式的說明文檔，包括該請求方式的URL、輸入參數、輸出參數以及相關的描述信息；

執行數據接口測試流程：針對部署的數據接口，輸入參數要求的參數值，向數據接口通用生成器服務發出HTTP請求，驗證該數據接口的功能；

執行數據接口部署流程：將處于發布狀態的數據接口信息部署，讓數據接口通用生成器訪問該數據接口信息從而生成數據接口；

執行數據接口維護流程：提供數據接口的維護功能，用于為每個數據接口添加相應的中文描述信息；

執行數據接口生成服務流程：以接口的形式暴露給模型管理，當模板部署成功后調用該接口，按照基本數據接口生成方法生成相應的數據接口信息，按照版本管理約束進行版本管理，并將生命周期狀態更新為發布；

執行數據接口通用生成服務流程：作為服務端處理每個部署的數據接口的請求，執行數據接口信息。

2.根據權利要求1所述的數據處理方法，其特征在于，所述數據采集管理系統執行的數據采集流程，包括：

進行數據的提取、轉換、加載以及集成，根據業務需求配置數據轉換傳輸的ETL腳本，并測試腳本是否符合要求，上傳腳本至ETL管理平臺，通過ETL管理平臺控制腳本啟動和關閉，以實現數據采集的啟動和關閉。

3.根據權利要求1所述的數據處理方法，其特征在于，所述數據采集管理系統執行的采集腳本配置，包括：

設置醫院的各個業務系統或各醫院數據中心的數據庫鏈接，針對數據源的采集，系統有病歷采集和SQL采集兩種方式，在SQL采集中，系統根據數據集標準內容編寫SQL采集語句并保存配置，實現各醫院業務數據庫或醫院數據中心結構，與區域醫療數據中心數據集標準的匹配與對應，針對不同采集模型設置不同采集時間和采集周期，以錯開各個業務模型數據采集時間點。