[發明專利]一種數據處理方法和裝置、存儲介質、處理器

有效

• 申請號: 201710894929.7
• 申請日: 2017-09-28
• 公開（公告）號: CN109582935B
• 公開（公告）日: 2023-05-23
• 發明（設計）人: 張鵬
• 申請（專利權）人: 北京國雙科技有限公司
• 主分類號: G06F16/172
• 分類號: G06F16/172;G06F16/16;G06F16/14;G06F16/11
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 劉志紅;王寶筠

1.一種數據處理方法，其特征在于，應用于服務器中，所述服務器包括第一服務和第二服務，該方法包括：

所述第一服務接收并存儲瀏覽器上傳的待處理數據，獲取存儲位置的路徑名稱，并將所述路徑名稱發送至所述第二服務；

所述第二服務基于所述路徑名稱查找所述待處理數據，對所述待處理數據進行處理，將處理后的數據保存至數據庫中；

還包括：

所述第二服務生成任務標識，并將所述任務標識以及所述任務標識與所述待處理數據之間的對應關系發送給所述第一服務；

所述第二服務實時將所述待處理數據的處理狀態信息與所述任務標識的對應關系緩存至緩存器中；

所述第一服務基于所述任務標識以及所述對應關系查找所述緩存器，獲取與所述任務標識對應的所述待處理數據的處理狀態信息；

所述第一服務將所述處理狀態信息發送至瀏覽器，以由所述瀏覽器顯示在前端頁面上。

2.根據權利要求1所述的方法，其特征在于，還包括：

所述第一服務判斷所述待處理數據的數據量是否達到預設數據量，若是，采用預設分批方式對所述待處理數據進行分批，以實現所述第二服務對所述待處理數據的分批處理。

3.根據權利要求1所述的方法，其特征在于，還包括：

所述第二服務記錄所述待處理數據的快照；所述快照包括所述待處理數據的任務標識對應的所述待處理數據中每一數據的位置標識。

4.根據權利要求3所述的方法，其特征在于，還包括：

當所述第一服務接收到攜帶有任務標識的下載請求時，將所述下載請求發送至所述第二服務；

所述第二服務在數據庫中查找與所述任務標識對應的已處理數據；

所述第二服務基于所述快照對所述已處理數據進行排序，將排序后的數據返回給所述第一服務；

所述第一服務將排序后的數據返回給瀏覽器。

5.一種數據處理裝置，其特征在于，應用于服務器中，所述數據處理裝置包括：第一服務模塊和第二服務模塊；

所述第一服務模塊包括：接收數據單元、存儲數據單元以及獲取名稱單元；

所述接收數據單元，用于接收瀏覽器上傳的待處理數據；

所述存儲數據單元，用于存儲瀏覽器上傳的待處理數據；

所述獲取名稱單元，用于獲取存儲位置的路徑名稱，并將所述路徑名稱發送至第二服務模塊；

所述第二服務模塊包括：查找數據單元、處理數據單元以及保存數據單元；

所述查找數據單元用于基于所述路徑名稱查找所述待處理數據；

所述處理數據單元用于對所述待處理數據進行處理；

所述保存數據單元用于將處理后的數據保存至數據庫中；

所述第二服務模塊還包括：

生成標識單元，用于生成任務標識并將所述任務標識以及所述任務標識與所述待處理數據之間的對應關系發送給所述第一服務模塊；

緩存信息單元，用于實時將所述待處理數據的處理狀態信息與所述任務標識的對應關系緩存至緩存器中；

所述第一服務模塊還包括：

接收標識單元，用于接收所述任務標識以及所述對應關系；

獲取信息單元，用于基于所述任務標識以及所述對應關系查找所述緩存器，獲取與所述任務標識對應的所述待處理數據的處理狀態信息；

發送信息單元，用于將所述處理狀態信息發送至瀏覽器，以由所述瀏覽器顯示在前端頁面上。

6.根據權利要求5所述的裝置，其特征在于，所述第一服務模塊還包括：

第一判斷單元，用于判斷所述待處理數據的數據量是否達到預設數據量；

數據分批單元，用于當所述待處理數據的數據流達到預設數據量時，采用預設分批方式對所述待處理數據進行分批，以實現對所述待處理數據的分批處理。

7.一種存儲介質，其特征在于，所述存儲介質包括存儲的程序，其中，在所述程序運行時控制所述存儲介質所在設備執行如權利要求1-4中任一項所述的數據處理方法。

8.一種處理器，其特征在于，所述處理器用于運行程序，其中，所述程序運行時執行如權利要求1-4中任一項所述的數據處理方法。