[發明專利]數據處理方法、裝置、存儲介質及電子設備

在審

• 申請號: 201911419917.4
• 申請日: 2019-12-31
• 公開（公告）號: CN111158939A
• 公開（公告）日: 2020-05-15
• 發明（設計）人: 宋佳城;安小建
• 申請（專利權）人: 中消云（北京）物聯網科技研究院有限公司
• 主分類號: G06F9/54
• 分類號: G06F9/54;G06F3/0481;G06F16/11;G06F16/16
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 董文倩

1.一種數據處理方法，其特征在于，包括：

接收上傳的電子表格文件；

將所述電子表格文件中的每條數據分別存放至消息隊列中，以及記錄并存儲每條數據的處理結果；

采用多個線程對所述消息隊列中的各條數據進行并行處理。

2.根據權利要求1所述的方法，其特征在于，

記錄并存儲每條數據的處理結果包括：將所述每條數據的處理結果存儲至指定數據庫中；

記錄并存儲每條數據的處理結果之后，所述方法還包括：從所述指定數據庫中獲取所述處理結果；基于所述處理結果確定每條數據的處理進度；將所述處理進度推送至前端設備進行展示。

3.根據權利要求1所述的方法，其特征在于，采用多個線程對所述消息隊列中的各條數據進行并行處理包括：

確定所述消息隊列中待處理的數據條數；

基于所述數據條數按照預設規則確定所述線程的第一數量，其中，所述預設規則包括：每個線程支持的最大處理條數；

采用所述第一數量的線程對所述消息隊列中的各條數據進行并行處理。

4.根據權利要求3所述的方法，其特征在于，采用所述第一數量的線程對所述消息隊列中的各條數據進行并行處理之前，所述方法還包括：

確定所述第一數量的線程所需要的目標內存資源；

獲取所述消息隊列所在設備的可用內存資源；

比較所述目標內存資源和可用內存資源的大小；

在所述目標內存資源大于所述可用內存資源時，減小所述第一數量的取值，直至所述目標內存資源小于或等于所述可用內存資源。

5.根據權利要求1所述的方法，其特征在于，將所述電子表格文件中的每條數據分別存放至消息隊列中，包括：

從所述電子表格文件中讀取所述每條數據，得到多條數據；

將所述多條數據異步存儲至所述消息隊列中。

6.一種數據處理方法，其特征在于，包括：

在人機交互界面中展示用于上傳電子表格文件的控件，并在該控件被觸發時，接收上傳的電子表格文件；

在所述人機交互界面中展示用于存儲所述電子表格文件中的每條數據分的消息隊列，并展示每條數據的處理結果；

展示用于對所述消息隊列中的各條數據進行并行處理的多個線程。

7.一種數據處理裝置，其特征在于，包括：

接收模塊，用于接收上傳的電子表格文件；

存儲模塊，用于將所述電子表格文件中的每條數據分別存放至消息隊列中，以及記錄并存儲每條數據的處理結果；

處理模塊，用于采用多個線程對所述消息隊列中的各條數據進行并行處理。

8.根據權利要求7所述的裝置，其特征在于，所述處理模塊，還用于確定所述消息隊列中待處理的數據條數；基于所述數據條數按照預設規則確定所述線程的第一數量，其中，所述預設規則包括：每個線程支持的最大處理條數；以及采用所述第一數量的線程對所述消息隊列中的各條數據進行并行處理。

9.一種非易失性存儲介質，其特征在于，所述非易失性存儲介質包括存儲的程序，其中，在所述程序運行時控制所述非易失性存儲介質所在設備執行權利要求1至5中任意一項所述的數據處理方法。

10.一種電子設備，其特征在于，包括：

存儲器，用于存儲程序指令；

處理器，用于運行所述程序指令，其中，所述程序運行時執行權利要求1至5中任意一項所述的數據處理方法。