[發(fā)明專利]一種基于數(shù)據(jù)采集與對賬的系統(tǒng)及方法

在審

• 申請?zhí)枺?/td>: 202211515682.0
• 申請日: 2022-11-30
• 公開（公告）號: CN116089508A
• 公開（公告）日: 2023-05-09
• 發(fā)明（設(shè)計(jì)）人: 陳坤;章莉
• 申請（專利權(quán)）人: 貴州多彩寶互聯(lián)網(wǎng)服務(wù)有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/28;G06Q40/12
• 代理公司: 北京瑞盛銘杰知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11617
• 代理人: 李績

1.一種基于數(shù)據(jù)采集與對賬的系統(tǒng)，其特征在于，包括：

數(shù)據(jù)采集接口模塊，用于接收用戶通過人機(jī)交互界面制定的配置采集規(guī)則；

核對模塊，用于根據(jù)所述配置采集規(guī)則對本系統(tǒng)數(shù)據(jù)和目標(biāo)系統(tǒng)數(shù)據(jù)進(jìn)行核對，所述本系統(tǒng)和所述目標(biāo)系統(tǒng)為異構(gòu)數(shù)據(jù)倉庫。

2.根據(jù)權(quán)利要求1所述的基于數(shù)據(jù)采集與對賬的系統(tǒng)，其特征在于，

所述核對模塊包括：

任務(wù)分解單元，用于將數(shù)據(jù)核對任務(wù)分解成至少一個子任務(wù)，每一個子任務(wù)都與由至少一條指令組成的指令集相關(guān)聯(lián)；

操作單元，用于分別根據(jù)每組指令集，通過調(diào)用相應(yīng)的采集指令從業(yè)務(wù)系統(tǒng)采集原始數(shù)據(jù)；

報(bào)告分析單元，用于根據(jù)所述適配規(guī)則對所述數(shù)據(jù)進(jìn)行動態(tài)適配處理，以生成本系統(tǒng)可識別的資源對象，所述本系統(tǒng)可識別的資源對象對應(yīng)所述本系統(tǒng)的信息表的一部分，所述本系統(tǒng)的信息表的內(nèi)容為待核對的本系統(tǒng)資源對象；

數(shù)據(jù)組裝單元：用于將每個子任務(wù)所對應(yīng)生成的本系統(tǒng)可識別的資源對象進(jìn)行組裝，以生成待核對的業(yè)務(wù)系統(tǒng)資源對象，所述待核對的業(yè)務(wù)系統(tǒng)資源對象對應(yīng)所述本系統(tǒng)的信息表；

核對單元：用于根據(jù)所確定的核對數(shù)據(jù)項(xiàng)，將待核對的業(yè)務(wù)系統(tǒng)資源對象與本系統(tǒng)的信息表進(jìn)行比對，并標(biāo)注比對結(jié)果，然后根據(jù)核對規(guī)則進(jìn)行數(shù)據(jù)同步處理。

3.一種基于數(shù)據(jù)采集與對賬系統(tǒng)的方法，其特征在于：包括以下步驟：

步驟S1，接入業(yè)務(wù)系統(tǒng)，采集數(shù)據(jù)源，配置采集接口規(guī)則；

步驟S2，通過步驟S1采集數(shù)據(jù)，傳輸至目標(biāo)表；

步驟S3，通過將不同源的數(shù)據(jù)采集加工成標(biāo)準(zhǔn)化或易于對賬的數(shù)據(jù)，為對賬系統(tǒng)數(shù)據(jù)對賬做準(zhǔn)備；

步驟S4，通知對賬系統(tǒng)，所需對賬的源數(shù)據(jù)表在哪兒，歸屬哪個業(yè)務(wù)線；

步驟S5，待對賬數(shù)據(jù)和對賬結(jié)果數(shù)據(jù)均存儲在數(shù)據(jù)倉庫表中，記錄數(shù)據(jù)的插入時間以及插入序號；

步驟S6，對賬業(yè)務(wù)數(shù)據(jù)處理準(zhǔn)實(shí)時進(jìn)行，各接入渠道采集源數(shù)據(jù)，均按日期分區(qū)存儲，并進(jìn)行數(shù)據(jù)分片；

步驟S7，確定業(yè)務(wù)系統(tǒng)數(shù)據(jù)源和本系統(tǒng)數(shù)據(jù)之間的關(guān)系；

步驟S8，確定需要進(jìn)行核對的數(shù)據(jù)，并在本系統(tǒng)內(nèi)建立信息表；

步驟S9，定時檢查每一個對賬作業(yè)，判斷是否需要進(jìn)行對賬，如果是，則會生成一個對賬任務(wù)；

步驟S10，針對步驟S9生成的對賬任務(wù)，分批將對賬所需的參數(shù)，向步驟S8提交任務(wù)進(jìn)行對賬并輸出結(jié)果。

4.根據(jù)權(quán)利要求3所述的基于數(shù)據(jù)采集與對賬系統(tǒng)的方法，其特征在于：利用基于哈希表(hash-table)數(shù)據(jù)結(jié)構(gòu)的比對算法對數(shù)據(jù)采集結(jié)果進(jìn)行對賬。

5.根據(jù)權(quán)利要求3所述的基于數(shù)據(jù)采集與對賬系統(tǒng)的方法，其特征在于：所述信息表的內(nèi)容為待核對的本系統(tǒng)資源對象，配置數(shù)據(jù)核對任務(wù)，并配置核對任務(wù)的觸發(fā)類型和處理類型，為所述數(shù)據(jù)核對任務(wù)配置子任務(wù)，并將所述子任務(wù)與由至少一條指令組成的一組指令集做關(guān)聯(lián)，配置指令的回復(fù)數(shù)據(jù)報(bào)文的適配規(guī)則，根據(jù)所述適配規(guī)則從業(yè)務(wù)系統(tǒng)動態(tài)提取數(shù)據(jù)，并將所提取的數(shù)據(jù)與所述信息表的信息內(nèi)容做映射，配置核對規(guī)則，所述核對規(guī)則確定核對數(shù)據(jù)項(xiàng)。

6.根據(jù)權(quán)利要求5所述的基于數(shù)據(jù)采集與對賬系統(tǒng)的方法，其特征在于：所述配置核對規(guī)則所需的配置項(xiàng)目為查詢字段、對比字段、主鍵字段、數(shù)據(jù)源、查詢范圍、匯總條件、輸出表。

7.根據(jù)權(quán)利要求3所述的基于數(shù)據(jù)采集與對賬系統(tǒng)的方法，其特征在于：所述業(yè)務(wù)系統(tǒng)數(shù)據(jù)源和本系統(tǒng)數(shù)據(jù)之間的關(guān)系包括一對一、一對多及多對多的關(guān)系。