[發(fā)明專(zhuān)利]數(shù)據(jù)導(dǎo)出方法、數(shù)據(jù)導(dǎo)出裝置、電子設(shè)備及介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202011522164.2
• 申請(qǐng)日: 2020-12-21
• 公開(kāi)（公告）號(hào): CN112597224A
• 公開(kāi)（公告）日: 2021-04-02
• 發(fā)明（設(shè)計(jì)）人: 李澤鋒;李平?jīng)?/a>;李清意;禹龍晨
• 申請(qǐng)（專(zhuān)利權(quán)）人: 中國(guó)工商銀行股份有限公司
• 主分類(lèi)號(hào): G06F16/25
• 分類(lèi)號(hào): G06F16/25;G06F9/48;G06F9/54
• 代理公司: 中科專(zhuān)利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 王曉晗

本公開(kāi)提供了一種應(yīng)用于第一服務(wù)器的數(shù)據(jù)導(dǎo)出方法。該方法包括：接收?qǐng)?zhí)行第一數(shù)據(jù)導(dǎo)出任務(wù)的調(diào)用請(qǐng)求；根據(jù)所述調(diào)用請(qǐng)求的信息，獲得所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量；基于所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量確定數(shù)據(jù)導(dǎo)出方式，其中，包括：在所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量大于等于第一預(yù)設(shè)閾值時(shí)，采用多線程并發(fā)導(dǎo)出數(shù)據(jù)；在所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量小于第一預(yù)設(shè)閾值時(shí)，采用單線程導(dǎo)出數(shù)據(jù)；確定至少一個(gè)數(shù)據(jù)導(dǎo)出文件，以將數(shù)據(jù)導(dǎo)出到所述至少一個(gè)數(shù)據(jù)導(dǎo)出文件中。本公開(kāi)還提供了一種應(yīng)用于第二服務(wù)器的數(shù)據(jù)導(dǎo)出方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。本公開(kāi)提供的數(shù)據(jù)導(dǎo)出方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)可用于金融領(lǐng)域或其他領(lǐng)域。

技術(shù)領(lǐng)域

本公開(kāi)涉及金融領(lǐng)域，更具體地，涉及一種數(shù)據(jù)導(dǎo)出方法、數(shù)據(jù)導(dǎo)出裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著計(jì)算機(jī)技術(shù)發(fā)展，伴隨著龐大的數(shù)據(jù)產(chǎn)生，需要將數(shù)據(jù)進(jìn)行收集、存儲(chǔ)、導(dǎo)出和分析。利用現(xiàn)有的數(shù)據(jù)導(dǎo)出功能，用戶(hù)可以根據(jù)選擇的數(shù)據(jù)種類(lèi)及篩選條件，得到所需要的目標(biāo)數(shù)據(jù)。在面對(duì)數(shù)據(jù)量小、業(yè)務(wù)簡(jiǎn)單、并發(fā)數(shù)量少的場(chǎng)景時(shí)，現(xiàn)有的數(shù)據(jù)導(dǎo)出功能可以滿(mǎn)足大多數(shù)的數(shù)據(jù)導(dǎo)出需求。

在實(shí)現(xiàn)本公開(kāi)構(gòu)思的過(guò)程中，發(fā)明人發(fā)現(xiàn)現(xiàn)有技術(shù)中至少存在如下問(wèn)題：在處理大數(shù)據(jù)量的導(dǎo)出時(shí)，會(huì)占用大量的系統(tǒng)資源，導(dǎo)致數(shù)據(jù)導(dǎo)出功能的性能下降，降低用戶(hù)體驗(yàn)。

發(fā)明內(nèi)容

有鑒于此，本公開(kāi)實(shí)施例提供了一種可以根據(jù)導(dǎo)出數(shù)據(jù)的數(shù)據(jù)量大小選擇不同導(dǎo)出方式的數(shù)據(jù)導(dǎo)出方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)。

本公開(kāi)實(shí)施例的一個(gè)方面提供了一種應(yīng)用于第一服務(wù)器的數(shù)據(jù)導(dǎo)出方法。所述數(shù)據(jù)導(dǎo)出方法包括：接收?qǐng)?zhí)行第一數(shù)據(jù)導(dǎo)出任務(wù)的調(diào)用請(qǐng)求；根據(jù)所述調(diào)用請(qǐng)求的信息，獲得所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量；基于所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量確定數(shù)據(jù)導(dǎo)出方式，其中，包括：在所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量大于等于第一預(yù)設(shè)閾值時(shí)，采用多線程并發(fā)導(dǎo)出數(shù)據(jù)；在所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量小于第一預(yù)設(shè)閾值時(shí)，采用單線程導(dǎo)出數(shù)據(jù)；確定至少一個(gè)數(shù)據(jù)導(dǎo)出文件，以將數(shù)據(jù)導(dǎo)出到所述至少一個(gè)數(shù)據(jù)導(dǎo)出文件中。

根據(jù)本公開(kāi)的實(shí)施例，所述采用多線程并發(fā)導(dǎo)出數(shù)據(jù)包括：將所述第一數(shù)據(jù)導(dǎo)出任務(wù)拆解為N個(gè)第二數(shù)據(jù)導(dǎo)出任務(wù)，所述第二數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量小于所述第一預(yù)設(shè)閾值；采用多線程并發(fā)執(zhí)行N個(gè)所述第二數(shù)據(jù)導(dǎo)出任務(wù)，其中，N為大于等于2的整數(shù)。

根據(jù)本公開(kāi)的實(shí)施例，所述將所述第一數(shù)據(jù)導(dǎo)出任務(wù)拆解為N個(gè)第二數(shù)據(jù)導(dǎo)出任務(wù)包括：設(shè)置第二預(yù)設(shè)閾值，所述第二預(yù)設(shè)閾值小于所述第一預(yù)設(shè)閾值；從所述第一數(shù)據(jù)導(dǎo)出任務(wù)的起始位置開(kāi)始，每隔所述第二預(yù)設(shè)閾值將所述第一數(shù)據(jù)導(dǎo)出任務(wù)的一部分分配給一個(gè)所述第二數(shù)據(jù)導(dǎo)出任務(wù)，得到N個(gè)所述第二數(shù)據(jù)導(dǎo)出任務(wù)。

根據(jù)本公開(kāi)的實(shí)施例，所述采用多線程并發(fā)執(zhí)行N個(gè)所述第二數(shù)據(jù)導(dǎo)出任務(wù)包括：確定第一數(shù)據(jù)導(dǎo)出文件；獲取所述第一數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)在所述第一數(shù)據(jù)導(dǎo)出文件中的起始位置；從所述起始位置每隔所述第二預(yù)設(shè)閾值獲得所述第一數(shù)據(jù)導(dǎo)出文件中的一個(gè)導(dǎo)出位置，直至得到N-1個(gè)所述導(dǎo)出位置；基于所述起始位置和N-1個(gè)所述導(dǎo)出位置將N個(gè)所述第二數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)寫(xiě)入所述第一數(shù)據(jù)導(dǎo)出文件。

根據(jù)本公開(kāi)的實(shí)施例，所述采用多線程并發(fā)執(zhí)行N個(gè)所述第二數(shù)據(jù)導(dǎo)出任務(wù)包括循環(huán)執(zhí)行以下操作，直至將N個(gè)所述第二數(shù)據(jù)導(dǎo)出任務(wù)全部導(dǎo)出：確定當(dāng)前所述第一數(shù)據(jù)導(dǎo)出任務(wù)導(dǎo)出的第二數(shù)據(jù)導(dǎo)出文件；若所述第二數(shù)據(jù)導(dǎo)出文件的可用空間大于等于接下來(lái)要導(dǎo)出的所述第二數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量，則將所述第二數(shù)據(jù)導(dǎo)出任務(wù)寫(xiě)入所述第二數(shù)據(jù)導(dǎo)出文件；或者若所述第二數(shù)據(jù)導(dǎo)出文件的可用空間小于接下來(lái)要導(dǎo)出的所述第二數(shù)據(jù)導(dǎo)出任務(wù)的導(dǎo)出數(shù)據(jù)量，則創(chuàng)建第三數(shù)據(jù)導(dǎo)出文件，并將所述第二數(shù)據(jù)導(dǎo)出任務(wù)寫(xiě)入所述第三數(shù)據(jù)導(dǎo)出文件。