[發明專利]數據導出方法、數據導出裝置、電子設備及介質

在審

• 申請號: 202011522164.2
• 申請日: 2020-12-21
• 公開（公告）號: CN112597224A
• 公開（公告）日: 2021-04-02
• 發明（設計）人: 李澤鋒;李平涼;李清意;禹龍晨
• 申請（專利權）人: 中國工商銀行股份有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F9/48;G06F9/54
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 王曉晗

1.一種數據導出方法，應用于第一服務器，其中，包括：

接收執行第一數據導出任務的調用請求；

根據所述調用請求的信息，獲得所述第一數據導出任務的導出數據量；

基于所述第一數據導出任務的導出數據量確定數據導出方式，其中，包括：

在所述第一數據導出任務的導出數據量大于等于第一預設閾值時，采用多線程并發導出數據；

在所述第一數據導出任務的導出數據量小于第一預設閾值時，采用單線程導出數據；

確定至少一個數據導出文件，以將數據導出到所述至少一個數據導出文件中。

2.根據權利要求1所述的數據導出方法，其中，所述采用多線程并發導出數據包括：

將所述第一數據導出任務拆解為N個第二數據導出任務，所述第二數據導出任務的導出數據量小于所述第一預設閾值；

采用多線程并發執行N個所述第二數據導出任務，其中，N為大于等于2的整數。

3.根據權利要求2所述的數據導出方法，其中，所述將所述第一數據導出任務拆解為N個第二數據導出任務包括：

設置第二預設閾值，所述第二預設閾值小于所述第一預設閾值；

從所述第一數據導出任務的起始位置開始，每隔所述第二預設閾值將所述第一數據導出任務的一部分分配給一個所述第二數據導出任務，得到N個所述第二數據導出任務。

4.根據權利要求2所述的數據導出方法，其中，所述采用多線程并發執行N個所述第二數據導出任務包括：

確定第一數據導出文件，其中，所述至少一個數據導出文件包括所述第一數據導出文件；

獲取將數據導出到所述第一數據導出文件中的起始位置；

從所述起始位置每隔所述第二預設閾值獲得所述第一數據導出文件中的一個導出位置，直至得到N-1個所述導出位置；

基于所述起始位置和N-1個所述導出位置將N個所述第二數據導出任務的導出數據寫入所述第一數據導出文件。

5.根據權利要求2所述的數據導出方法，其中，所述采用多線程并發執行N個所述第二數據導出任務包括循環執行以下操作，直至將N個所述第二數據導出任務全部導出：

確定當前所述第二數據導出任務導出的第二數據導出文件，其中，所述至少一個數據導出文件包括所述第二數據導出文件；

若所述第二數據導出文件的可用空間大于等于接下來要導出的所述第二數據導出任務的導出數據量，則將所述第二數據導出任務寫入所述第二數據導出文件；或者

若所述第二數據導出文件的可用空間小于接下來要導出的所述第二數據導出任務的導出數據量，則創建第三數據導出文件，并將所述第二數據導出任務寫入所述第三數據導出文件，其中，所述至少一個數據導出文件包括所述第三數據導出文件。

6.根據權利要求1所述的數據導出方法，所述確定至少一個數據導出文件包括：

若所述第一數據導出任務第一次導出數據，則創建一個第四數據導出文件，以將數據導出到所述第四數據導出文件中；或者

若所述第一數據導出任務非第一次導出數據，則將數據導出到第五數據導出文件中，其中，所述第五數據導出文件為所述第一數據導出任務上一次導出數據的文件。

7.一種數據導出方法，應用于第二服務器，包括：

獲取第三數據導出任務；

從至少一個第一服務器中確定出與所述第三數據導出任務對應的目標服務器，其中，包括：

根據預存的所述至少一個第一服務器與數據業務種類的對應關系，查詢與所述第三數據導出任務對應的目標服務器；

發出調用請求，以使得所述目標服務器執行所述第三數據導出任務。

8.根據權利要求7所述的數據導出方法，其中，所述第三數據導出任務被預先加入消息隊列，所述獲取第三數據導出任務包括：

從所述消息隊列獲取所述第三數據導出任務以進行異步處理。