[發明專利]一種基于ETL技術協同多通訊協議的數據交換方法及裝置

有效

• 申請號: 201710193992.8
• 申請日: 2017-03-28
• 公開（公告）號: CN107135198B
• 公開（公告）日: 2021-04-16
• 發明（設計）人: 鄒紀根;劉紅鑫
• 申請（專利權）人: 深圳市卓訊信息技術有限公司
• 主分類號: H04L29/06
• 分類號: H04L29/06
• 代理公司: 北京化育知識產權代理有限公司 11833
• 代理人: 尹均利

1.一種基于ETL技術協同多通訊協議的數據交換方法，其特征在于，包括：

接收用戶的攜帶數據類型的數據交換請求，所述數據交換請求用于請求將源端數據進行轉換處理并交換到目的端，所述數據類型包括：源端數據的第一數據類型、目的端數據的第二數據類型；

從至少兩種通訊協議中確定出支持所述第一數據類型的第一通訊協議，通過所述第一通訊協議連接所述源端，從所述源端獲取數據；

根據所述數據交換請求將所述第一數據類型的數據轉換為所述第二數據類型的數據；

從至少兩種通訊協議中確定出支持所述第二數據類型的第二通訊協議，并通過所述第二通訊協議連接所述目的端，將所述數據發送至所述目的端；

所述方法在根據所述數據交換請求將所述第一數據類型的數據轉換為所述第二數據類型的數據之前，還包括：

對所述數據進行清洗處理，所述清洗處理包括：合并字段、剪切字符串、去除重復記錄、拆分字段、排序記錄、替換空值、合并結果集；

所述第一通訊協議包括至少兩個通訊協議，所述通過所述第一通訊協議連接所述源端包括：從所述至少兩個通訊協議中選擇一個通訊協議，并通過選擇的通訊協議連接所述源端。

2.根據權利要求1所述的方法，其特征在于，所述第一數據類型包括：結構化數據、非結構化數據，所述第二數據類型包括：所述結構化數據、所述非結構化數據，所述根據所述數據交換請求將所述第一數據類型的數據轉換為所述第二數據類型的數據具體包括：

根據所述數據交換請求將所述結構化數據轉換為所述非結構化數據；

或者，根據所述數據交換請求將所述非結構化數據轉換為結構化數據。

3.根據權利要求1-2任一項所述的方法，其特征在于，所述方法在將所述數據傳輸至所述目的端之后，還包括：

將所述轉換之后的數據發布為數據服務，所述數據服務用于為本地或者外部用戶提供訪問。

4.一種基于ETL技術協同多通訊協議的數據交換裝置，其特征在于，包括：

接收單元，用于接收用戶的攜帶數據類型的數據交換請求，所述數據交換請求用于請求將源端數據進行轉換處理并交換到目的端，所述數據類型包括：源端數據的第一數據類型、目的端數據的第二數據類型；

數據獲取單元，用于從至少兩種通訊協議中確定出支持所述第一數據類型的第一通訊協議，通過所述第一通訊協議連接所述源端，從所述源端獲取數據；

所述第一通訊協議包括至少兩個通訊協議，所述數據獲取單元具體包括：

從所述至少兩個通訊協議中選擇一個通訊協議，并通過選擇的通訊協議連接所述源端；

數據清洗單元，用于對所述數據進行清洗處理，所述清洗處理包括：合并字段、剪切字符串、去除重復記錄、拆分字段、排序記錄、替換空值、合并結果集；

數據轉換單元，用于根據所述接收單元中的數據交換請求將所述數據獲取單元中的第一數據類型的數據轉換為所述第二數據類型的數據；

發送單元，用于從至少兩種通訊協議中確定出支持所述第二數據類型的第二通訊協議，并通過所述第二通訊協議連接所述目的端，將所述數據發送至所述目的端。

5.根據權利要求4所述的裝置，其特征在于，所述第一數據類型包括：結構化數據、非結構化數據，所述第二數據類型包括：所述結構化數據、所述非結構化數據，所述數據轉換單元具體包括：

根據所述數據交換請求將所述結構化數據轉換為所述非結構化數據；

或者，根據所述數據交換請求將所述非結構化數據轉換為結構化數據。

6.根據權利要求4-5任一項所述的裝置，其特征在于，還包括：

服務單元，用于將所述轉換之后的數據發布為數據服務，所述數據服務用于為本地或者外部用戶提供訪問。