[發明專利]數據處理方法及裝置

在審

• 申請號: 201710106220.6
• 申請日: 2017-02-24
• 公開（公告）號: CN108509447A
• 公開（公告）日: 2018-09-07
• 發明（設計）人: 嚴波
• 申請（專利權）人: 北京國雙科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京鼎佳達知識產權代理事務所(普通合伙) 11348
• 代理人: 王偉鋒;劉鐵生

1.一種數據處理方法，其特征在于，包括：

獲取攜帶有算法標識信息的待處理數據，所述算法標識信息用于標識所述待處理數據需要的運算算法；

從配置文件中提取與所述算法標識信息對應的數據處理操作指令，所述配置文件中包含有與各個算法標識信息分別對應的數據處理操作指令；

根據所述數據處理操作指令，對所述待處理數據進行處理。

2.根據權利要求1所述的方法，其特征在于，所述配置文件中還包含有與各個待處理數據來源分別對應的數據獲取操作指令，所述獲取攜帶有算法標識信息的待處理數據之前，所述方法還包括：

接收數據處理請求，所述數據處理請求中包含有所述待處理數據來源位置信息；

從配置文件中提取與所述待處理數據來源位置信息對應的數據獲取操作指令；

所述獲取攜帶有算法標識信息的待處理數據包括：

根據所述數據獲取操作指令，從相應的數據來源位置獲取攜帶有算法標識信息的待處理數據。

3.根據權利要求2所述的方法，其特征在于，所述根據所述數據獲取操作指令，從相應的數據來源位置獲取攜帶有算法標識信息的待處理數據之后，所述方法還包括：

調用與所述數據來源位置信息對應的預置接口；

通過所述預置接口中的預置數據結構轉換關系，將所述待處理數據轉換為預置數據框結構的數據。

4.根據權利要求1所述的方法，其特征在于，所述數據處理操作指令為join連接、聚合運算，結構化查詢語言sql分析中的一種或多種。

5.根據權利要求1所述的方法，其特征在于，所述根據所述數據處理操作指令，對所述待處理數據進行處理之后，所述方法還包括：

將處理后的數據進行輸出并保存在預置存儲區域內。

6.一種數據處理裝置，其特征在于，包括：

獲取單元，用于獲取攜帶有算法標識信息的待處理數據，所述算法標識信息用于標識所述待處理數據需要的運算算法；

提取單元，用于從配置文件中提取與所述算法標識信息對應的數據處理操作指令，所述配置文件中包含有與各個算法標識信息分別對應的數據處理操作指令；

處理單元，用于根據所述數據處理操作指令，對所述待處理數據進行處理。

7.根據權利要求6所述的裝置，其特征在于，所述配置文件中還包含有與各個待處理數據來源分別對應的數據獲取操作指令，所述裝置還包括：接收單元，

所述接收單元，用于接收數據處理請求，所述數據處理請求中包含有所述待處理數據來源位置信息；

所述提取單元，還用于從配置文件中提取與所述待處理數據來源位置信息對應的數據獲取操作指令；

所述獲取單元，具體用于根據所述數據獲取操作指令，從相應的數據來源位置獲取攜帶有算法標識信息的待處理數據。

8.根據權利要求7所述的裝置，其特征在于，所述裝置還包括：

調用單元，用于調用與所述數據來源位置信息對應的預置接口；

轉換單元，用于通過所述預置接口中的預置數據結構轉換關系，將所述待處理數據轉換為預置數據框結構的數據。

9.根據權利要求6所述的裝置，其特征在于，所述數據處理操作指令為join連接、聚合運算，結構化查詢語言sql分析中的一種或多種。

10.根據權利要求6所述的裝置，其特征在于，所述裝置還包括：

輸出單元，用于將運算后的數據進行輸出；

保存單元，用于將所述輸出的數據保存在預置存儲區域內。