[發明專利]一種數據處理方法及裝置、存儲介質、電子裝置

有效

• 申請號: 202010079996.5
• 申請日: 2020-02-04
• 公開（公告）號: CN111338787B
• 公開（公告）日: 2023-09-01
• 發明（設計）人: 孫志亮;周偉
• 申請（專利權）人: 浙江大華技術股份有限公司
• 主分類號: G06F9/50
• 分類號: G06F9/50;G06F9/54
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 江舟

1.一種數據處理方法，其特征在于，包括：

接收第N個線程節點發送的第一目標數據，其中，所述第N個線程節點用于從第一預設隊列中獲取所述第一目標數據，所述N是大于或等于1的自然數；

利用線程池中的第一線程對所述第一目標數據進行處理，得到第二目標數據；

將所述第二目標數據發送至第二預設隊列中，其中，所述第二預設隊列用于存儲所述第二目標數據；

接收第N+1個線程節點發送的所述第二目標數據，其中，所述第N+1個線程節點用于從所述第二預設隊列中獲取所述第二目標數據；

基于所述第一線程的狀態對所述第二目標數據進行處理，得到第三目標數據；

其中，基于所述第一線程的狀態對所述第二目標數據進行處理，得到第三目標數據，包括：在所述第一線程處于空閑狀態的情況下，在所述線程池中的任務隊列中創建用于對所述第二目標數據進行處理的第二待執行任務；通過所述第一線程執行所述第二待執行任務，以得到所述第三目標數據。

2.根據權利要求1所述的方法，其特征在于，接收第N個線程節點發送的第一目標數據之前，所述方法還包括：

對獲取的待處理數據進行分片，得到M個數據，其中，所述M是大于或等于1的自然數；

通過第N-1個線程節點將所述M個數據依次保存至所述第一預設隊列中；

將所述M個數據中第K個數據確定為所述第一目標數據，其中，所述K是小于或等于所述M的自然數。

3.根據權利要求1所述的方法，其特征在于，利用線程池中的第一線程對所述第一目標數據進行處理，得到第二目標數據，包括：

在所述線程池中的任務隊列中創建用于對所述第一目標數據進行處理的第一待執行任務；

在所述線程池中創建所述第一線程；

通過所述第一線程執行所述第一待執行任務，以得到所述第二目標數據。

4.根據權利要求1所述的方法，其特征在于，基于所述第一線程的狀態對所述第二目標數據進行處理，得到第三目標數據，包括：

在所述第一線程處于非空閑狀態的情況下，利用線程池中的第二線程對所述第二目標數據進行處理，得到所述第三目標數據。

5.根據權利要求4所述的方法，其特征在于，在所述第一線程處于非空閑狀態的情況下，利用線程池中的第二線程對所述第二目標數據進行處理，得到所述第三目標數據，包括：

在所述第一線程處于非空閑狀態的情況下，在所述線程池中的任務隊列中創建用于對所述第二目標數據進行處理的第三待執行任務；

在所述線程池中創建所述第二線程；

通過所述第二線程執行所述第三待執行任務，以得到所述第三目標數據。

6.一種數據處理裝置，其特征在于，包括：

第一接收模塊，用于接收第N個線程節點發送的第一目標數據，其中，所述第N個線程節點用于從第一預設隊列中獲取所述第一目標數據，所述N是大于或等于1的自然數；

第一確定模塊，用于利用線程池中的第一線程對所述第一目標數據進行處理，得到第二目標數據；

第一發送模塊，用于將所述第二目標數據發送至第二預設隊列中，其中，所述第二預設隊列用于存儲所述第二目標數據；

第二接收模塊，用于接收第N+1個線程節點發送的所述第二目標數據，其中，所述第N+1個線程節點用于從所述第二預設隊列中獲取所述第二目標數據；

第二確定模塊，用于基于所述第一線程的狀態對所述第二目標數據進行處理，得到第三目標數據；

其中，所述第二確定模塊，還用于在所述第一線程處于空閑狀態的情況下，在所述線程池中的任務隊列中創建用于對所述第二目標數據進行處理的第二待執行任務；通過所述第一線程執行所述第二待執行任務，以得到所述第三目標數據。

7.一種存儲介質，其特征在于，所述存儲介質中存儲有計算機程序，其中，所述計算機程序被設置為運行時執行所述權利要求1至5任一項中所述的方法。

8.一種電子裝置，包括存儲器和處理器，其特征在于，所述存儲器中存儲有計算機程序，所述處理器被設置為運行所述計算機程序以執行所述權利要求1至5任一項中所述的方法。