[發明專利]一種數據采集方法、裝置及系統

有效

• 申請號: 201611097713.X
• 申請日: 2016-12-02
• 公開（公告）號: CN106777933B
• 公開（公告）日: 2019-05-10
• 發明（設計）人: 劉鵬科
• 申請（專利權）人: 鄭州云海信息技術有限公司
• 主分類號: G16H10/00
• 分類號: G16H10/00;G06F16/25;G06F16/215
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 羅滿

本發明公開了一種數據采集方法，包括：數據抽取線程從對應的業務數據庫中抽取原始數據；利用數據清洗線程進行篩選過濾，利用數據加工線程對類型進行轉換，利用數據封裝線程封裝成對應的XML文件；可見，獲取業務數據庫中的原始數據時，可通過與該業務數據庫對應的數據抽取線程獲取原始數據，從而增加了數據采集裝置的橫向擴展性；并且，本方案中通過單獨的數據清洗線程、數據加工線程和數據封裝線程對原始數據進行處理，這樣在每個線程處理數據時，可通過調整線程數量參數控制線程的啟停，從而增加了線程啟停的靈活性，提高采集效率；本發明實施例還公開了一種數據采集裝置及系統，同樣能實現上述技術效果。

技術領域

本發明涉及數據采集技術領域，更具體地說，涉及一種數據采集方法、裝置及系統。

背景技術

隨著醫療云的普及，從海量分散醫療機構數據中挖據有價值的數據，可用來協助社區及基層衛生機構的初級醫生對患者作出準確的診斷和用藥決策；通過對各個社區居民的醫療數據進行匯總及統計分析，可實現對流行病、慢性病的自動篩查、趨勢分析和爆發預警，為公共衛生機構制定防治干預計劃和行動提供有力的依據和參考。因此，如何快速的獲取患者的癥狀、生命體征、檢驗檢測結果、醫療影像、診斷、處方、醫囑、手術、住院和賬單等全周期數據，實現對終端數據的快速采集，為后續得大數據處理工作提供支撐，是本領域技術人員需要解決的問題。

發明內容

本發明的目的在于提供一種數據采集方法、裝置及系統，以實現從業務數據庫中快速獲取數據，為后續得大數據處理工作提供支撐。

為實現上述目的，本發明實施例提供了如下技術方案：

一種數據采集方法，包括：

通過數據抽取線程從對應的業務數據庫中抽取原始數據；

利用數據清洗線程對所述原始數據進行篩選過濾，生成第一處理數據；

利用數據加工線程對所述第一處理數據的類型進行轉換，生成第二處理數據；

利用數據封裝線程將所述第二處理數據封裝成對應的XML文件；

其中，所述數據抽取線程、所述數據清洗線程、所述數據加工線程和所述數據封裝線程的線程數量參數均為可自定義的線程數量參數。

其中，所述通過數據抽取線程從對應的業務數據庫中抽取原始數據之前，還包括：

接收用戶輸入的線程數量參數修改指令；

利用所述線程數量參數修改指令，對所述數據抽取線程、所述數據清洗線程、所述數據加工線程和所述數據封裝線程中至少一者的線程數量參數進行調整。

其中，所述通過數據抽取線程從對應的業務數據庫中抽取原始數據之后，還包括：

檢測所述原始數據的第一數據屬性；

根據所述第一數據屬性調整所述數據清洗線程的線程數量參數。

其中，所述利用數據清洗線程對所述原始數據進行篩選過濾，生成第一處理數據之后，還包括：

檢測所述第一處理數據的第二數據屬性；

根據所述第二數據屬性調整所述數據加工線程的線程數量參數。

其中，所述利用數據加工線程對所述第一處理數據的類型進行轉換，生成第二處理數據之后，還包括：

檢測所述第二處理數據的第三數據屬性；

根據所述第三數據屬性調整所述數據封裝線程的線程數量參數。

其中，所述將利用數據封裝線程將所述第二處理數據封裝成對應的XML文件之后，還包括：

根據所述XML文件的優先級信息，確定與所述XML文件對應的目標業務隊列；