[發明專利]為多場景業務提供標準化數據質量校驗的系統

在審

• 申請號: 202111112606.0
• 申請日: 2021-09-23
• 公開（公告）號: CN113849492A
• 公開（公告）日: 2021-12-28
• 發明（設計）人: 沈玉軍;邢繼風;劉建華;蔣華;姚思佳;張英杰;杜偉;莊崇;許洋;杜建君;高旭;謝菲;田玉成;郭婕;李民權;何娟娟
• 申請（專利權）人: 北京網聘咨詢有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/27
• 代理公司: 北京中濟緯天專利代理有限公司 11429
• 代理人: 張瑩

本發明公開了一種為多場景業務提供標準化數據質量校驗的系統，屬于數據質量校驗技術領域。所述系統從內至外包括基礎支持層、后端服務層、引擎服務層以及應用層。通過統一標準化數據質量校驗系統的建設，未來將應用在簡歷產生、簡歷流轉的各個環節中，實現在數據產生的源頭控制數據質量，并在簡歷使用的各個環節中做數據質量優化，保證簡歷數據的可用性。同時，使數據校驗開發的鏈路更為清晰，減少了代碼的耦合，提高了項目開發效率，為業務多樣化提供基礎保障。

技術領域

本發明屬于數據質量校驗技術領域，具體地說，涉及一種為多場景業務提供標準化數據質量校驗的系統。

背景技術

在多場景并存業務處理系統中，通常存在以下技術問題：一，各產品業務要求不同，因此導入的數據內容不同；二，各產品開發采用的語言不同，導致數據結構不同，例如APP端口和網頁端，存在數據語言和結構的差異，通常獲取的用戶數據也會有差異；三，同一項目的不同產品內因應用場景不同，因而對數據需求不同。這種同一項目因服務產品業務需求、產品內場景需求、開發語言，從而導致數據結構，數據準確性存在差異，導致各產品產生的數據無法直接對外提供，需要匯總后經過較長時間的數據結構處理、數據清洗、數據提取后，進行分析與算法的推進。

為了更清晰地說明本發明，下文以在線招聘業務為例進行說明。

在線招聘業務發展至今，為2.1億用戶提供服務產品主要為招聘PC端、APP-ios/Android、M站、小程序、校園產品、卓聘產品等。這些產品中均有簡歷填寫入口，但因對于簡歷的業務需求不同，各產品的簡歷數據存在較大差異。差異體主要體現在以下方面：各產品業務要求不同，導致數據內容不同。例如工作經歷的職位類別，卓聘產品可選2級或3級職類，其他端產品僅可選擇3級職類。各產品開發采用的語言不同，導致對于數據結構不同。例如工作經歷中的職位薪資填寫，在APP與PC端提供填寫有日薪/月薪/年薪(可能還包括工作天數)等方式，其他端僅有月薪一種填寫方式。產品內因場景不同，因而簡歷數據需求不同。例如在填寫場景中，求職者按模塊填寫，可隨時保存退出，對簡歷完整無要求；但在投遞場景中，若簡歷缺失必要信息時，將引導求職者填寫相關缺失內容。簡歷因服務產品業務需求、產品內場景需求、開發語言導致，簡歷數據結構，數據準確性存在差異，導致各產品產生的簡歷數據無法直接對外提供，需要經過較長時間的數據結構處理、數據清洗、數據提取后，進行分析與算法的推進。

發明內容

1、要解決的問題

在多場景并存業務處理系統中，通常存在以下技術問題：一，各產品業務要求不同，因此導入的數據內容不同；二，各產品開發采用的語言不同，導致數據結構不同，例如APP端口和網頁端，存在數據語言和結構的差異，通常獲取的用戶數據也會有差異；三，同一項目的不同產品內因應用場景不同，因而對數據需求不同。這種同一項目因服務產品業務需求、產品內場景需求、開發語言，從而導致數據結構，數據準確性存在差異，導致各產品產生的數據無法直接對外提供，需要匯總后經過較長時間的數據結構處理、數據清洗、數據提取后，進行分析與算法的推進。

2、技術方案

為解決上述問題，本發明采用如下的技術方案。

一種為多場景業務提供標準化數據質量校驗的系統，所述系統從內至外包括基礎支持層、后端服務層、引擎服務層以及應用層；

所述基礎支持層包括如下模塊：服務器集群、數據庫集群、緩存服務器、基礎網絡、安全防護、分布式文件存儲及域名服務；所述數據庫集群、所述緩存服務器、所述基礎網絡、所述安全防護、所述分布式文件存儲、所述域名服務均與所述服務器集群進行交互；所述服務器集群用于定義與歸納整理元數據的管理模型，所述數據庫集群用于將元數據的抽象對象進行版本儲存，所述緩存服務器用于提供對熱點數據的儲存，所述基礎網絡用于提供網絡服務，所述安全防護用于在數據服務層的上層對數據進行加密訪問，所述分布式文件存儲用于存儲日志文件，所述域名服務用于提供訪問域名；