[發(fā)明專利]一種數(shù)據(jù)抽取方法、裝置及相關(guān)設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 202010430470.7
• 申請(qǐng)日: 2020-05-20
• 公開（公告）號(hào): CN111597245B
• 公開（公告）日: 2023-09-29
• 發(fā)明（設(shè)計(jì)）人: 孫軍;易鋒
• 申請(qǐng)（專利權(quán)）人: 政采云有限公司
• 主分類號(hào): G06F16/25
• 分類號(hào): G06F16/25;G06F16/248
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 張春輝

1.一種數(shù)據(jù)抽取方法，其特征在于，包括：

獲取業(yè)務(wù)數(shù)據(jù)；

根據(jù)所述業(yè)務(wù)數(shù)據(jù)進(jìn)行數(shù)據(jù)加載，獲得源數(shù)據(jù)；

根據(jù)所述業(yè)務(wù)數(shù)據(jù)配置抽取執(zhí)行器；

利用所述抽取執(zhí)行器對(duì)所述源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取，獲得目標(biāo)數(shù)據(jù)；

其中，所述根據(jù)所述業(yè)務(wù)數(shù)據(jù)配置抽取執(zhí)行器，包括：

根據(jù)所述業(yè)務(wù)數(shù)據(jù)確定業(yè)務(wù)規(guī)則；

根據(jù)所述業(yè)務(wù)規(guī)則配置抽取算法，抽取因子干擾器以及鏈路過濾器；

其中，所述利用所述抽取執(zhí)行器對(duì)所述源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取，獲得目標(biāo)數(shù)據(jù)，包括：

利用所述鏈路過濾器對(duì)所述源數(shù)據(jù)進(jìn)行過濾，獲得過濾后的源數(shù)據(jù)；

根據(jù)所述業(yè)務(wù)數(shù)據(jù)對(duì)所述過濾后的源數(shù)據(jù)進(jìn)行概率計(jì)算，獲得各初始抽取概率；

利用所述抽取因子干擾器對(duì)各所述初始抽取概率進(jìn)行概率浮動(dòng)，獲得各抽取概率；

利用所述抽取算法和各所述抽取概率對(duì)所述過濾后的源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取，獲得所述目標(biāo)數(shù)據(jù)。

2.如權(quán)利要求1所述的數(shù)據(jù)抽取方法，其特征在于，還包括：

發(fā)送確認(rèn)請(qǐng)求至所述目標(biāo)數(shù)據(jù)對(duì)應(yīng)的目標(biāo)對(duì)象；

判斷是否接收到所述目標(biāo)對(duì)象反饋的確認(rèn)信息；

若否，則返回所述利用所述抽取執(zhí)行器對(duì)所述源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取的步驟，直至獲得新的目標(biāo)對(duì)象。

3.如權(quán)利要求2所述的數(shù)據(jù)抽取方法，其特征在于，還包括：

將所述目標(biāo)數(shù)據(jù)發(fā)送至顯示設(shè)備進(jìn)行可視化展示。

4.一種數(shù)據(jù)抽取裝置，其特征在于，包括：

獲取模塊，用于獲取業(yè)務(wù)數(shù)據(jù)；

加載模塊，用于根據(jù)所述業(yè)務(wù)數(shù)據(jù)進(jìn)行數(shù)據(jù)加載，獲得源數(shù)據(jù)；

配置模塊，用于根據(jù)所述業(yè)務(wù)數(shù)據(jù)配置抽取執(zhí)行器；

抽取模塊，用于利用所述抽取執(zhí)行器對(duì)所述源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取，獲得目標(biāo)數(shù)據(jù)；

其中，所述配置模塊具體用于根據(jù)所述業(yè)務(wù)數(shù)據(jù)確定業(yè)務(wù)規(guī)則；根據(jù)所述業(yè)務(wù)規(guī)則配置抽取算法，抽取因子干擾器以及鏈路過濾器；

其中，所述抽取模塊具體用于利用所述鏈路過濾器對(duì)所述源數(shù)據(jù)進(jìn)行過濾，獲得過濾后的源數(shù)據(jù)；根據(jù)所述業(yè)務(wù)數(shù)據(jù)對(duì)所述過濾后的源數(shù)據(jù)進(jìn)行概率計(jì)算，獲得各初始抽取概率；利用所述抽取因子干擾器對(duì)各所述初始抽取概率進(jìn)行概率浮動(dòng)，獲得各抽取概率；利用所述抽取算法和各所述抽取概率對(duì)所述過濾后的源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取，獲得所述目標(biāo)數(shù)據(jù)。

5.如權(quán)利要求4所述的數(shù)據(jù)抽取裝置，其特征在于，還包括：

確認(rèn)模塊，用于發(fā)送確認(rèn)請(qǐng)求至所述目標(biāo)數(shù)據(jù)對(duì)應(yīng)的目標(biāo)對(duì)象；判斷是否接收到所述目標(biāo)對(duì)象反饋的確認(rèn)信息；若否，則返回所述利用所述抽取執(zhí)行器對(duì)所述源數(shù)據(jù)進(jìn)行數(shù)據(jù)抽取的步驟，直至獲得新的目標(biāo)對(duì)象。

6.如權(quán)利要求5所述的數(shù)據(jù)抽取裝置，其特征在于，還包括：

展示模塊，用于將所述目標(biāo)數(shù)據(jù)發(fā)送至顯示設(shè)備進(jìn)行可視化展示。

7.一種數(shù)據(jù)抽取設(shè)備，其特征在于，包括：

存儲(chǔ)器，用于存儲(chǔ)計(jì)算機(jī)程序；

處理器，用于執(zhí)行所述計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)如權(quán)利要求1至3任意一項(xiàng)所述的數(shù)據(jù)抽取方法的步驟。

8.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)上存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至3任意一項(xiàng)所述的數(shù)據(jù)抽取方法的步驟。