[發明專利]一種數據的導出方法及設備

在審

• 申請號: 201810457007.4
• 申請日: 2018-05-14
• 公開（公告）號: CN108664628A
• 公開（公告）日: 2018-10-16
• 發明（設計）人: 羅先賢;葉俊鋒;賴云輝;孫成;龍覺剛
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 深圳中一專利商標事務所 44237
• 代理人: 陳宇

1.一種數據的導出方法，其特征在于，包括：

接收數據導出請求；所述數據導出請求包括用戶標識以及目標數據參數；

將所述數據導出請求的用戶標識與當前占用導出線程的用戶標識進行匹配；

若任一所述占用導出線程的用戶標識與所述數據導出請求的用戶標識匹配，則輸出已響應信息給發起數據導出請求的用戶；

若各個所述占用導出線程的用戶標識與所述數據導出請求的用戶標識均不匹配，則從數據庫中提取與所述目標數據參數匹配的目標數據，并統計所述目標數據的數據量；

若所述數據量小于或等于預設的導出數據閾值，則創建所述數據導出請求對應的數據導出線程，并關聯所述用戶標識以及所述數據導出線程；通過所述數據導出線程導出目標數據。

2.根據權利要求1所述的導出方法，其特征在于，在所述提取與所述目標數據參數匹配的目標數據，并統計所述目標數據的數據量之后，還包括：

若所述數據量大于所述導出數據閾值，則基于所述導出數據閾值，將所述目標數據劃分為N個數據組；所述N具體為：

其中，TagetDateZise為目標數據的數據量；MaxDataZise為所述導出數據閾值；int(x)為取整函數；

創建N個并發導出線程，并關聯所述用戶標識以及N個所述并發導出線程；

通過所述并發導出線程分別導出各個所述數據組對應的目標數據。

3.根據權利要求1所述的導出方法，其特征在于，所述目標數據參數包括目標關鍵詞；所述從數據庫中提取與所述目標數據參數匹配的目標數據，包括：

基于語義分析算法，從所述數據庫存儲的數據中獲取多個候選關鍵詞，構成語料庫；

計算所述目標關鍵詞與所述語料庫中各個所述候選關鍵詞之間的匹配度，并選取匹配度大于預設匹配閾值的候選關鍵詞作為所述目標關鍵詞的關聯關鍵詞；

從所述數據庫中選取包含目標關鍵詞和/或所述關聯關鍵詞的數據作為所述目標數據。

4.根據權利要求1-3任一項所述的導出方法，其特征在于，還包括：

若接收到數據導入請求，則輸出數據校驗參數設置頁面，以獲取所述用戶輸入的數據校驗參數；

基于所述數據校驗參數對待導入數據進行校驗；

若存在與數據校驗參數不匹配的待導入數據，則標記不匹配的所述待導入數據，并返回數據異常信息。

5.根據權利要求1-3任一項所述的導出方法，其特征在于，在所述輸出已響應信息給發起數據導出請求的用戶之后，還包括：

檢測是否存在所述用戶標識對應的重發計數器；

若不存在所述用戶標識對應的重發計數器，則創建與該用戶標識關聯的重發計數器，并設置該重發計時器的初始值；

若存在所述用戶標識對應的重發計數器，則增加所述重發計數器的計數值；

若所述計數值大于預設的計數閾值，則屏蔽所述用戶發送的數據導出請求。

6.一種數據的導出設備，其特征在于，所述數據的導出設備包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，所述處理器執行所述計算機程序時實現如下步驟：

接收數據導出請求；所述數據導出請求包括用戶標識以及目標數據參數；

將所述數據導出請求的用戶標識與當前占用導出線程的用戶標識進行匹配；

若任一所述占用導出線程的用戶標識與所述數據導出請求的用戶標識匹配，則輸出已響應信息給發起數據導出請求的用戶；

若各個所述占用導出線程的用戶標識與所述數據導出請求的用戶標識均不匹配，則從數據庫中提取與所述目標數據參數匹配的目標數據，并統計所述目標數據的數據量；

若所述數據量小于或等于預設的導出數據閾值，則創建所述數據導出請求對應的數據導出線程，并關聯所述用戶標識以及所述數據導出線程；通過所述數據導出線程導出目標數據。