[發明專利]數據處理方法及相關產品

在審

• 申請號: 202210025739.2
• 申請日: 2022-01-11
• 公開（公告）號: CN114385613A
• 公開（公告）日: 2022-04-22
• 發明（設計）人: 翁浩敬
• 申請（專利權）人: 深圳思為科技有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/25;G06K9/62
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 邱群

1.一種數據處理方法，其特征在于，應用于數據處理系統，所述數據處理系統包括外部系統、適配中心和內部系統，包括：

響應于來自于外部系統的數據處理請求，通過適配中心從所述內部系統中同步滿足預設規范的數據源，所述數據源用于所述適配中心確定所述數據處理請求對應的業務場景；

根據所述業務場景對所述數據源進行數據清洗，得到目標數據源，將所述目標數據源發送于所述外部系統。

2.根據權利要求1所述的方法，其特征在于，在所述通過適配中心從所述內部系統中同步滿足預設規范的數據源之前，所述方法還包括：

確定所述數據處理請求對應的數據接口；

確定所述數據接口的目標接口類型；

根據預設的接口類型與數據同步方式之間的映射關系，確定所述目標接口類型對應的目標數據同步方式；

根據所述目標數據同步方式，執行所述通過所述適配中心從所述內部系統中同步滿足預設規范的數據源的步驟。

3.根據權利要求1或2所述的方法，其特征在于，所述通過適配中心從所述云系統中同步滿足預設規范的數據源，包括：

確定所述外部系統的所述數據處理請求中攜帶的數據字段；

確定所述數據字段對應的數據格式；

通過所述適配中心從所述云系統中獲取與所述數據格式對應的預設數據內容；

根據所述預設數據內容構造得到第一字典空間；

對所述第一字典空間進行處理，得到多個子第一字典空間，所述多個子第一字典空間對應的數據源即為所述滿足預設規范的數據源。

4.根據權利要求3所述的方法，其特征在于，所述根據所述業務場景對所述數據源進行數據清洗，得到目標數據源，包括：

根據所述數據字段，構造第二字典空間；

計算所述第二字典空間與所述多個子第一字典空間中每一子第一字典空間之間的距離，得到多個空間距離；

從所述多個空間距離中選取大于或等于預設距離的多個目標空間距離；

確定每一所述目標空間距離對應的目標子第一字典空間，得到多個目標子第一字典空間；

根據所述業務場景和所述多個目標子第一字典空間，確定所述目標數據源。

5.根據權利要求4所述的方法，其特征在于，所述根據所述業務場景和所述多個目標子第一字典空間，確定所述目標數據源，包括：

確定所述業務場景對應的第一隱私系數；

確定所述多個目標子第一字典空間對應的待清洗數據源；

根據預設的外部系統與隱私系數之間的映射關系，確定所述外部系統對應的第二隱私系數；

通過所述第二隱私系數對所述第一隱私系數進行優化，得到目標隱私系數；

從所述待清洗數據源中確定與所述業務場景相關的多組數據；

根據所述多組數據，生成每一組數據對應的數據矩陣；

根據所述目標隱私系數生成隱私矩陣；

根據所述隱私矩陣對所述每一數據矩陣進行數據清洗，得到每一組數據對應的目標數據，所述多個目標數據組成所述目標數據源。

6.根據權利要求2所述的方法，其特征在于，所述目標數據同步方式包括以下任一種：接口同步、定時任務同步和消息隊列同步。

7.一種數據處理裝置，其特征在于，應用于數據處理系統，所述數據處理系統包括外部系統、適配中心和內部系統，所述裝置包括：同步單元和數據清洗單元，其中，

所述同步單元，用于響應于來自于外部系統的數據處理請求，通過適配中心從所述內部系統中同步滿足預設規范的數據源，所述數據源用于所述適配中心確定所述數據處理請求對應的業務場景；

所述數據清洗單元，用于根據所述業務場景對所述數據源進行數據清洗，得到目標數據源，將所述目標數據源發送于所述外部系統。

8.一種電子設備，其特征在于，包括處理器、存儲器，所述存儲器用于存儲一個或多個程序，并且被配置由所述處理器執行，所述程序包括用于執行如權利要求1-6任一項所述的方法中的步驟的指令。