[發明專利]一種分布式數據抽取方法、裝置、計算機設備及存儲介質

在審

• 申請號: 201711445062.3
• 申請日: 2017-12-27
• 公開（公告）號: CN108182233A
• 公開（公告）日: 2018-06-19
• 發明（設計）人: 潘學佰;蔡澤敏;郁曉亮;張恒;張麒
• 申請（專利權）人: 蘇州麥迪斯頓醫療科技股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種分布式數據抽取方法，其特征在于，包括：

至少兩個獨立的數據抽取模塊獲取至少兩個數據源的數據，其中，所述數據抽取模塊與對應的數據源相匹配；

所述數據抽取模塊將所述數據轉換為預設格式，并對所述數據設置數據標識，形成采集數據；

所述數據抽取模塊將所述采集數據發送至數據接收端；

所述數據接收端接收所述采集數據，并根據所述數據標識將所述采集數據存儲至預設存儲位置。

2.根據權利要求1所述的方法，其特征在于，所述數據接收端接收所述采集數據，并根據所述數據標識將所述采集數據存儲至預設存儲位置，包括：

所述數據接收端接收所述采集數據，并獲取所述采集數據的接收時間，根據所述接收時間將所述采集數據預存儲于存儲隊列中；

所述數據接收端識別各采集數據的數據標識，根據所述存儲隊列中采集數據的存儲順序和所述數據標識將所述采集數據存儲至預設存儲位置。

3.根據權利要求2所述的方法，其特征在于，所述數據接收端在接收所述采集數據之后，還包括：

所述數據接收端根據所述采集數據的采集時間和數據類型，判斷所述采集數據是否存在數據重復；

若是，則將重復的采集數據刪除。

4.根據權利要求1或2所述的方法，其特征在于，所述數據接收端在接收所述采集數據之后，還包括：

所述數據接收端檢測所述采集數據的格式是否符合預設格式；

若否，則刪除所述采集數據，并向對應的數據抽取模塊發送格式異常提示信息。

5.根據權利要求1或2所述的方法，其特征在于，所述數據接收端在接收所述采集數據之后，還包括：

所述數據接收端根據所述采集數據的數據類型確定數據標準范圍；

所述數據接收端若檢測到所述采集數據在所述數據標準范圍外，則刪除所述采集數據，并生成數據異常提示信息。

6.一種分布式數據抽取裝置，其特征在于，包括：

至少兩個獨立的數據抽取模塊，用于獲取至少兩個數據源的數據，其中，所述數據抽取模塊與對應的數據源相匹配，將所述數據轉換為預設格式，并對數據設置數據標識，形成采集數據，將所述采集數據發送至數據接收端；

所述數據接收端，用于接收所述采集數據，并根據所述數據標識將所述采集數據存儲至預設存儲位置。

7.根據權利要求6所述的裝置，其特征在于，所述數據接收端包括預存儲單元和存儲單元；其中，

所述預存儲單元，用于接收所述采集數據，并獲取所述采集數據的接收時間，根據所述接收時間將所述采集數據預存儲于存儲隊列中；

所述存儲單元，用于識別各采集數據的數據標識，根據所述存儲隊列中采集數據的存儲順序和所述數據標識將所述采集數據存儲至預設存儲位置。

8.根據權利要求7所述的裝置，其特征在于，所述數據接收端還包括排重單元，其中，

所述排重單元，用于在接收所述采集數據之后，根據所述采集數據的采集時間和數據類型，判斷所述采集數據是否存在數據重復，若是，則將重復的采集數據刪除。

9.一種計算機設備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，其特征在于，所述處理器執行所述程序時實現如權利要求1-5中任一所述的方法。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，該程序被處理器執行時實現如權利要求1-5中任一所述的方法。