[發(fā)明專利]一種拉鏈表生成方法、裝置、設(shè)備及介質(zhì)在審
| 申請?zhí)枺?/td> | 201910532415.6 | 申請日: | 2019-06-19 |
| 公開(公告)號: | CN110209891A | 公開(公告)日: | 2019-09-06 |
| 發(fā)明(設(shè)計)人: | 楊得力;楊晨;李楊 | 申請(專利權(quán))人: | 河南中原消費金融股份有限公司 |
| 主分類號: | G06F16/901 | 分類號: | G06F16/901;G06F16/23;G06F16/21 |
| 代理公司: | 北京集佳知識產(chǎn)權(quán)代理有限公司 11227 | 代理人: | 丁曼曼 |
| 地址: | 450000 河南省*** | 國省代碼: | 河南;41 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 拉鏈 歷史數(shù)據(jù)記錄 表生成 數(shù)據(jù)記錄 字符串 表生成裝置 運行穩(wěn)定性 獲取目標 集群設(shè)備 歷史時刻 數(shù)據(jù)內(nèi)容 運算資源 大數(shù)據(jù) 運維 字段 拼接 運算 倉庫 占用 記錄 | ||
1.一種拉鏈表生成方法,其特征在于,包括:
讀取數(shù)據(jù)倉庫中的目標數(shù)據(jù)表在歷史時刻下的歷史數(shù)據(jù)記錄對應(yīng)的歷史特征值;其中,所述歷史特征值是通過預(yù)先將所述歷史數(shù)據(jù)記錄中各字段的數(shù)據(jù)內(nèi)容拼接為第一字符串,并對所述第一字符串進行Hash算法運算生成的;
獲取所述目標數(shù)據(jù)表在當(dāng)前時刻下與所述歷史數(shù)據(jù)記錄對應(yīng)的當(dāng)前數(shù)據(jù)記錄;
將所述當(dāng)前數(shù)據(jù)記錄中各字段的數(shù)據(jù)內(nèi)容拼接為第二字符串,并對所述第二字符串進行所述Hash算法運算生成當(dāng)前特征值;
判斷所述歷史特征值與所述當(dāng)前特征值是否存在差異;
如果是,則生成記錄有所述歷史數(shù)據(jù)記錄的拉鏈表。
2.根據(jù)權(quán)利要求1所述的拉鏈表生成方法,其特征在于,所述讀取數(shù)據(jù)倉庫中的目標數(shù)據(jù)表在歷史時刻下的歷史數(shù)據(jù)記錄對應(yīng)的歷史特征值,包括:
在預(yù)設(shè)的中間表中讀取所述歷史數(shù)據(jù)記錄對應(yīng)的所述歷史特征值;其中,所述中間表基于所述目標數(shù)據(jù)表的字段增設(shè)有記錄所述歷史特征值的特征值字段。
3.根據(jù)權(quán)利要求1所述的拉鏈表生成方法,其特征在于,所述目標數(shù)據(jù)表的字段中包含有存儲數(shù)據(jù)記錄生效日期的數(shù)據(jù)記錄生效日期字段,所述拉鏈表包含有數(shù)據(jù)記錄生效日期字段以及數(shù)據(jù)記錄失效日期字段。
4.根據(jù)權(quán)利要求1所述的拉鏈表生成方法,其特征在于,所述獲取所述目標數(shù)據(jù)表在當(dāng)前時刻下與所述歷史數(shù)據(jù)記錄對應(yīng)的當(dāng)前數(shù)據(jù)記錄,包括:
獲取所述目標數(shù)據(jù)表在當(dāng)前時刻下與所述歷史數(shù)據(jù)記錄的主鍵字段內(nèi)容相同的所述當(dāng)前數(shù)據(jù)記錄。
5.根據(jù)權(quán)利要求1所述的拉鏈表生成方法,其特征在于,所述Hash算法包括MD5 Hash算法。
6.根據(jù)權(quán)利要求1所述的拉鏈表生成方法,其特征在于,所述數(shù)據(jù)倉庫包括Hive數(shù)據(jù)倉庫。
7.根據(jù)權(quán)利要求1至6任意一項所述的拉鏈表生成方法,其特征在于,所述第一字符串以及所述第二字符串的數(shù)據(jù)類型均為字符串類型。
8.一種拉鏈表生成裝置,其特征在于,包括:
歷史特征獲取模塊,用于讀取數(shù)據(jù)倉庫中的目標數(shù)據(jù)表在歷史時刻下的歷史數(shù)據(jù)記錄對應(yīng)的歷史特征值;其中,所述歷史特征值是通過預(yù)先將所述歷史數(shù)據(jù)記錄中各字段的數(shù)據(jù)內(nèi)容拼接為第一字符串,并對所述第一字符串進行Hash算法運算生成的;
當(dāng)前數(shù)據(jù)獲取模塊,用于獲取所述目標數(shù)據(jù)表在當(dāng)前時刻下與所述歷史數(shù)據(jù)記錄對應(yīng)的當(dāng)前數(shù)據(jù)記錄;
當(dāng)前特征計算模塊,用于將所述當(dāng)前數(shù)據(jù)記錄中各字段的數(shù)據(jù)內(nèi)容拼接為第二字符串,并對所述第二字符串進行所述Hash算法運算生成當(dāng)前特征值;
差異判斷模塊,用于判斷所述歷史特征值與所述當(dāng)前特征值是否存在差異,如果是,則調(diào)用拉鏈表生成模塊;
所述拉鏈表生成模塊,用于生成記錄有所述歷史數(shù)據(jù)記錄的拉鏈表。
9.一種拉鏈表生成設(shè)備,其特征在于,包括:
存儲器,用于存儲計算機程序;
處理器,用于執(zhí)行所述計算機程序時實現(xiàn)如權(quán)利要求1至7任一項所述的拉鏈表生成方法的步驟。
10.一種計算機可讀存儲介質(zhì),其特征在于,所述計算機可讀存儲介質(zhì)上存儲有計算機程序,所述計算機程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至7任一項所述的拉鏈表生成方法的步驟。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于河南中原消費金融股份有限公司,未經(jīng)河南中原消費金融股份有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910532415.6/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 實現(xiàn)歷史數(shù)據(jù)繞接的方法
- 一種通訊終端快捷訪問歷史數(shù)據(jù)的裝置及方法
- 數(shù)據(jù)存儲量的預(yù)測方法和預(yù)測裝置
- 數(shù)據(jù)分類處理方法和裝置
- 歷史數(shù)據(jù)查詢方法及系統(tǒng)
- 基于區(qū)塊鏈的活動記錄查詢方法、裝置、設(shè)備及存儲介質(zhì)
- 歷史數(shù)據(jù)遷移方法及裝置、歷史數(shù)據(jù)查詢方法及裝置
- 一種基于存儲過程的OTRS系統(tǒng)的數(shù)據(jù)清洗方法
- 基于統(tǒng)一支撐平臺的電網(wǎng)歷史數(shù)據(jù)管理方法及系統(tǒng)
- 頁面更新方法、裝置、電子設(shè)備及存儲介質(zhì)
- 數(shù)據(jù)記錄介質(zhì),數(shù)據(jù)記錄方法,和數(shù)據(jù)記錄設(shè)備
- 數(shù)據(jù)記錄介質(zhì)、數(shù)據(jù)記錄方法和數(shù)據(jù)記錄裝置
- 數(shù)據(jù)記錄介質(zhì)、數(shù)據(jù)記錄方法和數(shù)據(jù)記錄設(shè)備
- 記錄數(shù)據(jù)記錄裝置和記錄數(shù)據(jù)記錄方法
- 數(shù)據(jù)記錄裝置、數(shù)據(jù)記錄方法及數(shù)據(jù)記錄程序
- 數(shù)據(jù)記錄設(shè)備、數(shù)據(jù)記錄方法以及數(shù)據(jù)記錄程序
- 數(shù)據(jù)記錄設(shè)備、數(shù)據(jù)記錄方法、以及數(shù)據(jù)記錄程序
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄裝置和數(shù)據(jù)記錄介質(zhì)
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄裝置和數(shù)據(jù)記錄介質(zhì)
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄設(shè)備以及數(shù)據(jù)記錄介質(zhì)





