[發(fā)明專利]大數(shù)據(jù)回歸驗(yàn)證方法及大數(shù)據(jù)回歸驗(yàn)證裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 202011031896.1
• 申請(qǐng)日: 2020-09-27
• 公開（公告）號(hào): CN111881128B
• 公開（公告）日: 2020-12-15
• 發(fā)明（設(shè)計(jì)）人: 顧凌云;郭志攀;王偉;鄭俊紅;謝杰
• 申請(qǐng)（專利權(quán)）人: 上海冰鑒信息科技有限公司
• 主分類號(hào): G06F16/215
• 分類號(hào): G06F16/215;G06F9/455;G06F16/242
• 代理公司: 成都頂峰專利事務(wù)所(普通合伙) 51224
• 代理人: 匡睿

1.一種大數(shù)據(jù)回歸驗(yàn)證方法，其特征在于，應(yīng)用于計(jì)算機(jī)設(shè)備，所述方法包括：

獲取第一數(shù)據(jù)源信息以及第二數(shù)據(jù)源信息，將所述第一數(shù)據(jù)源信息和所述第二數(shù)據(jù)源信息添加到預(yù)設(shè)配置文件中；

在所述預(yù)設(shè)配置文件中添加數(shù)據(jù)特征信息；

檢測(cè)是否接收到腳本運(yùn)行指令，若檢測(cè)到所述腳本運(yùn)行指令，運(yùn)行預(yù)設(shè)的python自動(dòng)化腳本，以基于所述預(yù)設(shè)配置文件中的第一數(shù)據(jù)源信息和第二數(shù)據(jù)源信息建立與業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)的第一數(shù)據(jù)訪問通道以及與大數(shù)據(jù)系統(tǒng)數(shù)據(jù)庫(kù)的第二數(shù)據(jù)訪問通道；

根據(jù)所述數(shù)據(jù)特征信息分別通過所述第一數(shù)據(jù)訪問通道和所述第二數(shù)據(jù)訪問通道對(duì)所述業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)和所述大數(shù)據(jù)系統(tǒng)數(shù)據(jù)庫(kù)中的數(shù)據(jù)進(jìn)行數(shù)據(jù)加工計(jì)算，得到與所述業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)對(duì)應(yīng)的第一結(jié)果文件以及與所述大數(shù)據(jù)系統(tǒng)數(shù)據(jù)庫(kù)對(duì)應(yīng)的第二結(jié)果文件；

判斷所述第一結(jié)果文件和所述第二結(jié)果文件是否一致；

若一致，則判定所述業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)與所述大數(shù)據(jù)系統(tǒng)數(shù)據(jù)庫(kù)通過數(shù)據(jù)驗(yàn)證；

若不一致，則提取所述第一結(jié)果文件和所述第二結(jié)果文件之間的差異數(shù)據(jù)，根據(jù)所述差異數(shù)據(jù)對(duì)所述預(yù)設(shè)配置文件進(jìn)行修復(fù)并返回根據(jù)所述數(shù)據(jù)特征信息分別通過所述第一數(shù)據(jù)訪問通道和所述第二數(shù)據(jù)訪問通道對(duì)業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)和所述大數(shù)據(jù)系統(tǒng)數(shù)據(jù)庫(kù)中的數(shù)據(jù)進(jìn)行數(shù)據(jù)加工計(jì)算的步驟；

其中，提取所述第一結(jié)果文件和所述第二結(jié)果文件之間的差異數(shù)據(jù)，包括：

獲取所述第一結(jié)果文件中的多條第一結(jié)果數(shù)據(jù)以及所述第二結(jié)果文件中的多條第二結(jié)果數(shù)據(jù)；其中，所述第一結(jié)果數(shù)據(jù)和所述第二結(jié)果數(shù)據(jù)分別具有信息標(biāo)識(shí)；

計(jì)算具有相同信息標(biāo)識(shí)的第一結(jié)果數(shù)據(jù)和第二結(jié)果數(shù)據(jù)的相似度；

將相似度小于設(shè)定值的第一結(jié)果數(shù)據(jù)和第二結(jié)果數(shù)據(jù)進(jìn)行打包得到目標(biāo)結(jié)果數(shù)據(jù)；

根據(jù)所述目標(biāo)結(jié)果數(shù)據(jù)得到所述差異數(shù)據(jù)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述差異數(shù)據(jù)對(duì)所述預(yù)設(shè)配置文件進(jìn)行修復(fù)，包括：

獲取所述差異數(shù)據(jù)中的第一目標(biāo)結(jié)果數(shù)據(jù)對(duì)應(yīng)的第一結(jié)果數(shù)據(jù)或者第二結(jié)果數(shù)據(jù)的目標(biāo)信息標(biāo)識(shí)；

確定所述目標(biāo)信息標(biāo)識(shí)的傳遞路徑并提取所述傳遞路徑中的數(shù)據(jù)加工邏輯節(jié)點(diǎn)；

在確定出所述數(shù)據(jù)加工邏輯節(jié)點(diǎn)對(duì)應(yīng)的指向信息與所述數(shù)據(jù)特征信息存在關(guān)聯(lián)關(guān)系時(shí)，對(duì)所述預(yù)設(shè)配置文件中的數(shù)據(jù)特征信息進(jìn)行修改。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，根據(jù)所述差異數(shù)據(jù)對(duì)所述預(yù)設(shè)配置文件進(jìn)行修復(fù)，包括：

若所述差異數(shù)據(jù)表征所述第一結(jié)果文件的第一結(jié)果數(shù)據(jù)的數(shù)量與所述第二結(jié)果文件的第二結(jié)果數(shù)據(jù)的數(shù)量不一致，則從所述預(yù)設(shè)配置文件中獲取對(duì)所述業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)和所述大數(shù)據(jù)系統(tǒng)數(shù)據(jù)庫(kù)中的數(shù)據(jù)進(jìn)行數(shù)據(jù)加工計(jì)算的邏輯信息列表；

在所述第一結(jié)果文件的第一結(jié)果數(shù)據(jù)的數(shù)量小于所述第二結(jié)果文件的第二結(jié)果數(shù)據(jù)的數(shù)量時(shí)，在所述邏輯信息列表中添加第一列表單元；其中，所述第一列表單元中的邏輯信息用于指示所述計(jì)算機(jī)設(shè)備對(duì)所述第一結(jié)果文件的第一結(jié)果數(shù)據(jù)進(jìn)行補(bǔ)全；

在所述第一結(jié)果文件的第一結(jié)果數(shù)據(jù)的數(shù)量大于所述第二結(jié)果文件的第二結(jié)果數(shù)據(jù)的數(shù)量時(shí)，在所述邏輯信息列表中添加第二列表單元；其中，所述第二列表單元中的邏輯信息用于指示所述計(jì)算機(jī)設(shè)備對(duì)所述第一結(jié)果文件的第一結(jié)果數(shù)據(jù)進(jìn)行過濾。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，在判定所述業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)與所述大數(shù)據(jù)系統(tǒng)數(shù)據(jù)庫(kù)通過數(shù)據(jù)驗(yàn)證之后，所述方法還包括：

將所述第一結(jié)果文件和所述第二結(jié)果文件進(jìn)行打包存儲(chǔ)。