[發明專利]一種用于業務風控日志數據的存儲方法及系統

有效

• 申請號: 201911135046.3
• 申請日: 2019-11-19
• 公開（公告）號: CN111008183B
• 公開（公告）日: 2023-09-15
• 發明（設計）人: 許守明;陳國慶;謝強
• 申請（專利權）人: 武漢極意網絡科技有限公司
• 主分類號: G06F16/18
• 分類號: G06F16/18;G06F16/13
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 鄭朝然

1.一種用于業務風控日志數據的存儲方法，其特征在于，包括：

根據業務風控日志數據的一個小時內的時間戳和業務場景標識，生成所述業務風控日志數據的block?ID；

將所述業務風控日志數據的block?ID和多個現有block?ID進行匹配，若匹配成功，則將匹配成功的現有block?ID對應的block作為目標block，并獲取所述目標block關聯的數據索引字典，其中，每個block是由數據塊、數據索引字典和元數據文件構成的；

根據所述數據索引字典中排序在末尾的數據塊文件編號，獲取所述數據塊文件編號在數據塊文件的目標偏移量；

將寫指針移位到所述目標偏移量，以對所述業務風控日志數據進行存儲寫入。

2.根據權利要求1所述的用于業務風控日志數據的存儲方法，其特征在于，所述將所述業務風控日志數據的block?ID和多個現有block?ID進行匹配，包括：

若匹配失敗，則根據所述業務風控日志數據的block?ID生成新block，并按照時間戳對所述新block?進行排序，以使得所述業務風控日志數據寫入到所述新block中。

3.根據權利要求1所述的用于業務風控日志數據的存儲方法，其特征在于，在所述將寫指針移位到所述目標偏移量，以對所述業務風控日志數據進行存儲寫入之后，所述方法還包括：

根據待查詢的目標業務風控日志數據，獲取所述目標業務風控日志數據對應的查詢時間段，并獲取所述查詢時間段內每個block的block?ID；

根據時間戳的先后順序，對所述查詢時間段內的block?ID進行排序，按照排序后的block?ID順序，獲取每個block關聯的數據索引字典；

根據每個block關聯的數據索引字典，獲取所述查詢時間段內每個業務風控日志數據對應的數據塊文件；

對所述數據塊文件進行遍歷，獲取所述目標業務風控日志數據。

4.根據權利要求1所述的用于業務風控日志數據的存儲方法，其特征在于，在所述將寫指針移位到所述目標偏移量，以對所述業務風控日志數據進行存儲寫入之后，所述方法還包括：

將預設時間段內的多個原始block進行壓縮合并，并將所述多個原始block占用的內存進行釋放，以得到壓縮合并后的block。

5.根據權利要求1所述的用于業務風控日志數據的存儲方法，其特征在于，所述將寫指針移位到所述目標偏移量，以對所述業務風控日志數據進行存儲寫入，包括：

對所述業務風控日志數據進行轉換，得到所述業務風控日志數據對應的數據塊文件形式或元數據文件形式，以用于存儲在本地磁盤中。

6.一種用于業務風控日志數據的存儲系統，其特征在于，包括：

block?ID生成模塊，用于根據業務風控日志數據的一個小時內的時間戳和業務場景標識，生成所述業務風控日志數據的block?ID，其中，每個block是由數據塊、數據索引字典和元數據文件構成的；

block?ID匹配模塊，用于將所述業務風控日志數據的block?ID和多個現有block?ID進行匹配，若匹配成功，則將匹配成功的現有block?ID對應的block作為目標block，并獲取所述目標block關聯的數據索引字典；

處理模塊，用于根據所述數據索引字典中排序在末尾的數據塊文件編號，獲取所述數據塊文件編號在數據塊文件的目標偏移量；

存儲寫入模塊，用于將寫指針移位到所述目標偏移量，以對所述業務風控日志數據進行存儲寫入。

7.根據權利要求6所述的用于業務風控日志數據的存儲系統，其特征在于，所述系統還包括：讀寫接口模塊，用于提供所述業務風控日志數據的寫入和查詢的讀寫接口。

8.一種電子設備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，其特征在于，所述處理器執行所述程序時實現如權利要求1至5任一項所述用于業務風控日志數據的存儲方法的步驟。

9.一種非暫態計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，該計算機程序被處理器執行時實現如權利要求1至5任一項所述用于業務風控日志數據的存儲方法的步驟。