[發明專利]一種應用大數據技術及中臺架構對銀行數據融合治理系統

在審

• 申請號: 202110012127.5
• 申請日: 2021-01-06
• 公開（公告）號: CN112651829A
• 公開（公告）日: 2021-04-13
• 發明（設計）人: 劉云高;余松衡
• 申請（專利權）人: 貴州易萬與科技有限公司
• 主分類號: G06Q40/02
• 分類號: G06Q40/02;G06F16/215;G06F16/2458;G06F16/25;G06F16/28
• 代理公司: 北京成實知識產權代理有限公司 11724
• 代理人: 張焱

本發明公開了一種應用大數據技術及中臺架構對銀行數據融合治理系統，包括數據源、數據采集層、數據存儲層、數據分析層和數據應用層，所述數據采集層與數據存儲層和數據分析層連接。本發明能夠根據業務和客戶對象的實際情況快速完成數據關聯和清洗，構建最有價值的金融數據資產，敏捷、高效的滿足各銀行業金融機構不同的數據治理場景和數據挖掘、分析需求；采用行業先進的云化和微服務的技術架構，實現了大數據算法和應用功能的“熱插拔”，確保了平臺功能可定制、可配置、可擴展、可靈活創新，以最大的靈活性支撐銀行在各種環境下的業務創新需求和管理精細化、流程化需求，建立智慧銀行并推動敏捷銀行建設。

技術領域

本發明涉及科技金融、銀行系統技術領域，具體為一種應用大數據技術及中臺架構對銀行數據融合治理系統。

背景技術

近年來互聯網銀行、影子銀行業務越發普及，大型國有銀行的業務逐漸下沉，各中小型銀行、地方法人銀行、農商銀行、信用社等銀行業金融機構競爭壓力明顯增大，為了應對競爭全國各大銀行業金融機構紛紛提出數字化轉型戰略，但因銀行業金融機構最初的信息化建設往往只是滿足經營過程和業務辦理，由于不同監管部門有不同的監管口徑，導致銀行內部數據往往依部門和條線而割裂，數據質量參差不齊，缺乏統一的規范和治理體系，難以綜合利用；又因為大多數傳統銀行仍然執行層級分明的金字塔形管理機制，各部門各條線的垂直化管理使得各部門墻林立，各部門擁有自己的系統、流程和數據，部門權利擴張高于全行利益考量，跨部門、跨條線協同機制欠缺，數據孤島、數據豎井現象嚴重，數據安全更得不到保障；因此銀行數字化轉型最核心的痛點就是“數據治理”，如果基礎數據管理架構不完善、數據治理工作不徹底，很難達到理想中的“數字化轉型”目標，更難以做到精確客戶洞察、精準營銷和服務以及業務流程再造。

發明內容

本發明的目的在于提供一種應用大數據技術及中臺架構對銀行數據融合治理系統，以解決上述背景技術中提出的問題。

為了解決上述技術問題，本發明提供如下技術方案：一種應用大數據技術及中臺架構對銀行數據融合治理系統，包括數據源、數據采集層、數據存儲層、數據分析層和數據應用層，所述數據采集層與數據存儲層和數據分析層連接，所述數據分析層與數據存儲層和數據應用層連接。

在一個優選的實施方式中，所述數據源指銀行業務數據和銀行以外的數據，所述數據源包括有關系型數據庫、數據文件和應用數據。

在一個優選的實施方式中，所述數據采集層包括數據傳輸單元和數據預處理單元，所述數據傳輸單元用于對銀行業務數據和銀行以外數據的采集，所述數據預處理單元用于對采集的數據進行過濾、轉換、清洗、挖掘。

在一個優選的實施方式中，所述數據傳輸單元包括ETL數據傳輸模塊、FTP數據傳輸模塊和數據網關傳輸模塊。

在一個優選的實施方式中，所述數據預處理單元包括有數據解析模塊、數據去重模塊、數據篩選模塊、數據清洗模塊、數據合并模塊、數據分類模塊和數據轉換模塊，所述數據解析模塊用于對接收的數據進行解析，所述數據去重模塊用于對解析后的數據進行去重，所述數據篩選模塊用于對數據的過濾篩選，所述數據清洗模塊用于對數據的清洗，所述數據合并模塊用于將清洗后的數據進行合并，所述數據分類模塊用于對數據進行分類，所述數據轉換模塊用于對數據進行轉換。

在一個優選的實施方式中，所述數據存儲層用于對數據的存儲，所述數據存儲層包括Hadoop數據存儲和系統關系型數據庫。

在一個優選的實施方式中，所述數據存儲層采用分布式文件存儲技術存儲數據，經過數據分析層對數據分析后形成主題數據庫。

在一個優選的實施方式中，所述數據分析層用于對采集的數據進行挖掘、分析得到對銀行有用的數據結果，所述數據分析層包括有SQL模塊、基礎運算模塊、機器學習模塊、數據統計模塊、實時分析模塊、自定義運算工作流模塊、標簽系統模塊和積分系統模塊。