[發(fā)明專利]基于異構(gòu)數(shù)據(jù)源離線同步工具的數(shù)據(jù)采集方法及裝置在審
| 申請?zhí)枺?/td> | 202111483186.7 | 申請日: | 2021-12-07 |
| 公開(公告)號: | CN114218328A | 公開(公告)日: | 2022-03-22 |
| 發(fā)明(設(shè)計)人: | 劉杰;李森輝 | 申請(專利權(quán))人: | 中信銀行股份有限公司 |
| 主分類號: | G06F16/27 | 分類號: | G06F16/27;G06F16/335 |
| 代理公司: | 北京市蘭臺律師事務所 11354 | 代理人: | 操飛越;張峰 |
| 地址: | 100020 北京市朝陽區(qū)光*** | 國省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 基于 數(shù)據(jù)源 離線 同步 工具 數(shù)據(jù) 采集 方法 裝置 | ||
本申請?zhí)峁┝艘环N基于異構(gòu)數(shù)據(jù)源離線同步工具的數(shù)據(jù)采集方法及裝置,一方面,采用配置數(shù)據(jù)庫中記錄的配置信息作為同步工具默認的配置,有效的降低了對同步工具進行配置所消耗的資源。另一方面,根據(jù)接收到數(shù)據(jù)采集指令對同步工具進行配置,能夠使得同步工具能夠契合數(shù)據(jù)采集指令,有利于實現(xiàn)數(shù)據(jù)采集效果。
技術(shù)領(lǐng)域
本申請涉及數(shù)據(jù)采集技術(shù)領(lǐng)域,具體而言,本申請涉及一種基于異構(gòu)數(shù)據(jù)源離線同步工具的數(shù)據(jù)采集方法及裝置。
背景技術(shù)
隨著信息社會的發(fā)展,大數(shù)據(jù)分析等技術(shù)的高速發(fā)展,對大量的、類型各異的信息數(shù)據(jù)進行整合,實現(xiàn)信息共享和內(nèi)部信息一體化,已變得越來越重要。當前各個企業(yè)的信息化發(fā)展大都存在異構(gòu)數(shù)據(jù)源同步難度大的問題。
一般來說,數(shù)據(jù)采集的過程需借由同步工具執(zhí)行,在采用同步工具進行數(shù)據(jù)采集之前,需對根據(jù)用戶的需求、數(shù)據(jù)源的情況等信息對同步工具進行配置。然而,該針對同步工具進行配置工作往往專業(yè)性較高,過程較為復雜,進而影響到到基于同步工具個數(shù)據(jù)采集效率。
發(fā)明內(nèi)容
本申請?zhí)峁┝艘会樆诋悩?gòu)數(shù)據(jù)源離線同步工具的數(shù)據(jù)采集方法及裝置,有效地降低了對同步工具的配置難度,有效的改善了數(shù)據(jù)采集的效果,本申請采用的技術(shù)方案如下:
第一方面,提供了一種基于異構(gòu)數(shù)據(jù)源離線同步工具的數(shù)據(jù)采集方法,所述方法基于數(shù)據(jù)采集系統(tǒng),所述數(shù)據(jù)采集系統(tǒng)包括后臺服務器、配置數(shù)據(jù)庫和若干個同步工具,所述配置數(shù)據(jù)庫用于記錄所述同步工具的配置信息,所述方法由后臺服務器執(zhí)行,所述方法包括:
針對每個同步工具,在該同步工具的狀態(tài)為空閑時,在所述配置數(shù)據(jù)庫中確定對應于該同步工具的配置信息,作為該同步工具的默認信息;
根據(jù)所述默認信息,對該同步工具進行配置;
在接收到數(shù)據(jù)采集指令時,確定該數(shù)據(jù)采集指令對應的同步工具,作為目標同步工具;
根據(jù)所述數(shù)據(jù)采集指令,確定該目標同步工具的配置信息,作為目標同步工具的配的目標信息;
根據(jù)目標信息對該目標同步工具進行配置;并且,根據(jù)目標信息,更新所述配置數(shù)據(jù)庫中對應于該同步工具的配置信息;
采用配置后的各同步工具,進行數(shù)據(jù)采集。
在一個可選的實施例中,在所述方法之前,還包括:
針對每個預設(shè)的網(wǎng)段,確定該網(wǎng)段是否對應有同步工具;
若否,則在未對應有網(wǎng)段的同步工具中,確定該網(wǎng)段對應的同步工具。
在本說明書一個可選的實施例中,根據(jù)所述數(shù)據(jù)采集指令,確定該目標同步工具的配置信息,作為目標同步工具的配的目標信息,包括:
確定該目標同步工具當前的配置與所述數(shù)據(jù)采集指令是否匹配;
若否,則在所述配置數(shù)據(jù)庫中,確定與該數(shù)據(jù)采集指令的匹配度最高的配置信息,作為目標同步工具的配的目標信息。
在本說明書一個可選的實施例中,所述數(shù)據(jù)采集系統(tǒng)還包括前端服務器;根據(jù)所述默認信息,對該同步工具進行配置,包括:
在接收到所述前端服務器發(fā)送的同步請求時,根據(jù)所述默認信息,對該同步工具進行配置。
在本說明書一個可選的實施例中,所述前端服務器包括交互界面,使得用戶根據(jù)所述交互界面生成數(shù)據(jù)采集指令。
在本說明書一個可選的實施例中,所述方法還包括:
確定所述前端服務器生成的配置調(diào)整請求對應的同步工具,作為待調(diào)整工具;
根據(jù)所述配置調(diào)整請求對應的調(diào)整信息,對所述配置數(shù)據(jù)庫中對應于所述待調(diào)整工具的配置信息進行調(diào)整。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于中信銀行股份有限公司,未經(jīng)中信銀行股份有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202111483186.7/2.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 一種數(shù)據(jù)同步處理方法、裝置和單點登錄系統(tǒng)
- 數(shù)據(jù)同步方法和裝置
- 切換數(shù)據(jù)源的方法及系統(tǒng)
- 多數(shù)據(jù)源的數(shù)據(jù)遷移方法
- 數(shù)據(jù)源補充方法、裝置、計算機設(shè)備和存儲介質(zhì)
- 一種數(shù)據(jù)源切換方法及系統(tǒng)
- 一種基于多個數(shù)據(jù)源調(diào)節(jié)工業(yè)自動化的操作系統(tǒng)
- 從不同數(shù)據(jù)源中獲取數(shù)據(jù)的方法、裝置及計算機設(shè)備
- 一種動態(tài)數(shù)據(jù)源查詢方法及裝置
- 一種訪問多數(shù)據(jù)源的方法及系統(tǒng)





