[發(fā)明專利]數(shù)據(jù)轉(zhuǎn)化信息處理方法及裝置

有效

• 申請?zhí)枺?/td>: 201410770715.5
• 申請日: 2014-12-11
• 公開（公告）號: CN104504029B
• 公開（公告）日: 2018-06-26
• 發(fā)明（設(shè)計）人: 趙立賀
• 申請（專利權(quán)）人: 北京國雙科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京康信知識產(chǎn)權(quán)代理有限責(zé)任公司 11240
• 代理人: 李志剛;吳貴明

本發(fā)明公開了一種數(shù)據(jù)轉(zhuǎn)化信息處理方法及裝置，該數(shù)據(jù)轉(zhuǎn)化信息處理方法包括：獲取待轉(zhuǎn)化數(shù)據(jù)；對待轉(zhuǎn)化數(shù)據(jù)執(zhí)行轉(zhuǎn)化處理，得到轉(zhuǎn)化結(jié)果；根據(jù)轉(zhuǎn)化結(jié)果獲取待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化成功數(shù)據(jù)和待轉(zhuǎn)化數(shù)據(jù)中轉(zhuǎn)化失敗數(shù)據(jù)，其中，轉(zhuǎn)化成功數(shù)據(jù)是指待轉(zhuǎn)化數(shù)據(jù)中成功轉(zhuǎn)化為目標(biāo)數(shù)據(jù)的數(shù)據(jù)，轉(zhuǎn)化失敗數(shù)據(jù)是指待轉(zhuǎn)化數(shù)據(jù)中未成功轉(zhuǎn)化為目標(biāo)數(shù)據(jù)的數(shù)據(jù)；以及將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化成功數(shù)據(jù)存儲至第一目標(biāo)存儲位置，并將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化失敗數(shù)據(jù)存儲至第二目標(biāo)存儲位置。通過本發(fā)明，解決了查找數(shù)據(jù)轉(zhuǎn)化成功和失敗的信息效率低的問題，進一步達到了提高查找數(shù)據(jù)轉(zhuǎn)化成功和失敗的信息的效率的效果。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，具體而言，涉及一種數(shù)據(jù)轉(zhuǎn)化信息處理方法及裝置。

背景技術(shù)

微軟SQL Server集成服務(wù)(Microsoft SQL Server Integration Services，簡稱為SSIS)，是生成高性能數(shù)據(jù)集成解決方案的平臺，例如，數(shù)據(jù)倉庫的提取、轉(zhuǎn)化和加載等。SSIS自帶日志功能，自帶的日志功能包括記錄異常、警告、事件操作、取消、失敗等重要信息，但是無法記錄數(shù)據(jù)轉(zhuǎn)化成功和數(shù)據(jù)轉(zhuǎn)化失敗的詳細數(shù)據(jù)信息，數(shù)據(jù)轉(zhuǎn)化是指從源數(shù)據(jù)轉(zhuǎn)化為目標(biāo)數(shù)據(jù)包含的處理過程，該處理過程包括類型轉(zhuǎn)化、數(shù)據(jù)整合和提煉等。

目前分析數(shù)據(jù)轉(zhuǎn)化異常根源的方法是通過SSIS日志記錄的SQL語句對比數(shù)據(jù)轉(zhuǎn)化的來源數(shù)據(jù)庫和數(shù)據(jù)轉(zhuǎn)化后的目標(biāo)數(shù)據(jù)庫，通過人工分析比較的方法得到轉(zhuǎn)化成功和數(shù)據(jù)轉(zhuǎn)化失敗的數(shù)據(jù)，從而分析出導(dǎo)致轉(zhuǎn)化異常的根源。從上述描述中可以看出，當(dāng)前的解決方案中并不支持自動記錄數(shù)據(jù)轉(zhuǎn)化成功和數(shù)據(jù)轉(zhuǎn)化失敗的詳細數(shù)據(jù)信息。這意味著用戶只能通過人工分析SQL語句得到轉(zhuǎn)化成功和數(shù)據(jù)轉(zhuǎn)化失敗的數(shù)據(jù)，這種人工分析方法存在效率低并且易出現(xiàn)失誤，這不利于用戶查找數(shù)據(jù)轉(zhuǎn)化異常的根源。

針對相關(guān)技術(shù)中查找數(shù)據(jù)轉(zhuǎn)化成功和數(shù)據(jù)轉(zhuǎn)化失敗的信息效率低的問題，目前尚未提出有效的解決方案。

發(fā)明內(nèi)容

本發(fā)明的主要目的在于提供一種數(shù)據(jù)轉(zhuǎn)化信息處理方法及裝置，以解決相關(guān)技術(shù)中查找數(shù)據(jù)轉(zhuǎn)化成功和數(shù)據(jù)轉(zhuǎn)化失敗的信息效率低的問題。

為了實現(xiàn)上述目的，根據(jù)本發(fā)明的一個方面，提供了一種數(shù)據(jù)轉(zhuǎn)化信息處理方法。

根據(jù)本發(fā)明的數(shù)據(jù)轉(zhuǎn)化信息處理方法包括：獲取待轉(zhuǎn)化數(shù)據(jù)；對待轉(zhuǎn)化數(shù)據(jù)執(zhí)行轉(zhuǎn)化處理，得到轉(zhuǎn)化結(jié)果；根據(jù)轉(zhuǎn)化結(jié)果獲取待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化成功數(shù)據(jù)和待轉(zhuǎn)化數(shù)據(jù)中轉(zhuǎn)化失敗數(shù)據(jù)，其中，轉(zhuǎn)化成功數(shù)據(jù)是指待轉(zhuǎn)化數(shù)據(jù)中成功轉(zhuǎn)化為目標(biāo)數(shù)據(jù)的數(shù)據(jù)，轉(zhuǎn)化失敗數(shù)據(jù)是指待轉(zhuǎn)化數(shù)據(jù)中未成功轉(zhuǎn)化為目標(biāo)數(shù)據(jù)的數(shù)據(jù)；以及將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化成功數(shù)據(jù)存儲至第一目標(biāo)存儲位置，并將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化失敗數(shù)據(jù)存儲至第二目標(biāo)存儲位置。

進一步地，獲取待轉(zhuǎn)化數(shù)據(jù)包括：從預(yù)設(shè)數(shù)據(jù)庫中獲取源數(shù)據(jù)；將源數(shù)據(jù)存儲至第三目標(biāo)存儲位置；以及從第三目標(biāo)存儲位置獲取待轉(zhuǎn)化數(shù)據(jù)。

進一步地，對待轉(zhuǎn)化數(shù)據(jù)執(zhí)行轉(zhuǎn)化處理包括：確定預(yù)設(shè)轉(zhuǎn)化類型；根據(jù)預(yù)設(shè)轉(zhuǎn)化類型將待轉(zhuǎn)化數(shù)據(jù)轉(zhuǎn)化為目標(biāo)數(shù)據(jù)，其中，目標(biāo)數(shù)據(jù)的類型為預(yù)設(shè)轉(zhuǎn)化類型；建立目標(biāo)數(shù)據(jù)與待轉(zhuǎn)化數(shù)據(jù)的對應(yīng)關(guān)系；以及輸出目標(biāo)數(shù)據(jù)與待轉(zhuǎn)化數(shù)據(jù)的對應(yīng)關(guān)系。

進一步地，將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化成功數(shù)據(jù)存儲至第一目標(biāo)存儲位置，并將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化失敗數(shù)據(jù)存儲至第二目標(biāo)存儲位置包括：獲取預(yù)設(shè)數(shù)據(jù)文件格式；以及按照預(yù)設(shè)數(shù)據(jù)文件格式將將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化成功數(shù)據(jù)存儲至第一目標(biāo)存儲位置，并按照預(yù)設(shè)數(shù)據(jù)文件格式將待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化失敗數(shù)據(jù)存儲至第二目標(biāo)存儲位置。

進一步地，在根據(jù)轉(zhuǎn)化結(jié)果獲取待轉(zhuǎn)化數(shù)據(jù)中的轉(zhuǎn)化成功數(shù)據(jù)和待轉(zhuǎn)化數(shù)據(jù)中轉(zhuǎn)化失敗數(shù)據(jù)之后，該方法還包括：根據(jù)轉(zhuǎn)化成功數(shù)據(jù)和轉(zhuǎn)化失敗數(shù)據(jù)解析轉(zhuǎn)化失敗數(shù)據(jù)轉(zhuǎn)化失敗的類型；以及輸出轉(zhuǎn)化失敗數(shù)據(jù)轉(zhuǎn)化失敗的類型。

為了實現(xiàn)上述目的，根據(jù)本發(fā)明的另一方面，提供了一種數(shù)據(jù)轉(zhuǎn)化信息處理裝置。