[發(fā)明專利]基于數(shù)據(jù)倉庫的文件移動方法、設(shè)備和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202011036803.4
• 申請日: 2020-09-28
• 公開（公告）號: CN112115115A
• 公開（公告）日: 2020-12-22
• 發(fā)明（設(shè)計）人: 何鑫;王斌;呂電福
• 申請（專利權(quán)）人: 企查查科技有限公司
• 主分類號: G06F16/185
• 分類號: G06F16/185;G06F16/215;G06F16/28
• 代理公司: 蘇州威世朋知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 32235
• 代理人: 董燕

本發(fā)明揭示了一種基于數(shù)據(jù)倉庫的文件移動方法、設(shè)備和存儲介質(zhì)，所述方法包括：獲取待篩選的數(shù)據(jù)信息，將所述數(shù)據(jù)信息發(fā)送給可執(zhí)行文件；所述可執(zhí)行文件根據(jù)預(yù)設(shè)的數(shù)據(jù)移動規(guī)則，對所述數(shù)據(jù)信息進行遍歷，得到待移動的數(shù)據(jù)信息；所述可執(zhí)行文件根據(jù)將所述待移動的數(shù)據(jù)信息從熱存儲區(qū)域移動到冷存儲區(qū)域，并修改所述待移動的數(shù)據(jù)信息在數(shù)據(jù)倉庫中的映射路徑指向冷存儲區(qū)域。與現(xiàn)有技術(shù)相比，本發(fā)明的基于數(shù)據(jù)倉庫的文件移動方法，通過將第三方存儲作為熱存儲區(qū)域，將普通的自建存儲系統(tǒng)作為冷存儲區(qū)域，然后及時、自動的將冷熱數(shù)據(jù)存儲到對應(yīng)區(qū)域，從而既降低存儲成本，又能夠滿足企業(yè)對日常業(yè)務(wù)進行分析使用時的存儲性能。

技術(shù)領(lǐng)域

本發(fā)明屬于計算機技術(shù)領(lǐng)域，具體涉及一種基于數(shù)據(jù)倉庫的文件移動方法、設(shè)備和存儲介質(zhì)。

背景技術(shù)

現(xiàn)有企業(yè)數(shù)據(jù)倉庫的存儲采用第三方提供的Isilon存儲系統(tǒng)。Isilon存儲系統(tǒng)具有速度快、性能好、安全性高等優(yōu)點，但是缺點是價格偏高。隨著企業(yè)業(yè)務(wù)的快速擴張，需要存儲的數(shù)據(jù)總量成指數(shù)級別增長，此時使用第三方提供的Isilon存儲系統(tǒng)，成本較高。但是，若使用價格較低但是性能偏低的存儲系統(tǒng)，其存儲性能不能滿足企業(yè)對日常業(yè)務(wù)進行分析使用時的要求。

在這種情況下，如何既降低存儲成本，又能夠滿足企業(yè)對日常業(yè)務(wù)進行分析使用時的存儲性能，是亟待解決的一個問題。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種基于數(shù)據(jù)倉庫的文件移動方法、設(shè)備和存儲介質(zhì)。

為實現(xiàn)上述發(fā)明目的之一，本發(fā)明一實施方式提供一種基于數(shù)據(jù)倉庫的文件移動方法，所述方法包括：

獲取待篩選的數(shù)據(jù)信息，將所述數(shù)據(jù)信息發(fā)送給可執(zhí)行文件；

所述可執(zhí)行文件根據(jù)預(yù)設(shè)的數(shù)據(jù)移動規(guī)則，對所述數(shù)據(jù)信息進行遍歷，得到待移動的數(shù)據(jù)信息；

所述可執(zhí)行文件根據(jù)所述待移動的數(shù)據(jù)信息，從數(shù)據(jù)倉庫中得到所述待移動的數(shù)據(jù)信息指向熱存儲區(qū)域的映射路徑，將所述待移動的數(shù)據(jù)信息從熱存儲區(qū)域移動到冷存儲區(qū)域，并修改所述待移動的數(shù)據(jù)信息在數(shù)據(jù)倉庫中的映射路徑指向冷存儲區(qū)域。

作為本發(fā)明一實施方式的進一步改進，所述“所述可執(zhí)行文件根據(jù)所述待移動的數(shù)據(jù)信息，從數(shù)據(jù)倉庫中得到所述待移動的數(shù)據(jù)信息指向熱存儲區(qū)域的映射路徑，將所述待移動的數(shù)據(jù)信息從熱存儲區(qū)域移動到冷存儲區(qū)域，并修改所述待移動的數(shù)據(jù)信息在數(shù)據(jù)倉庫中的映射路徑指向冷存儲區(qū)域”包括：

所述可執(zhí)行文件根據(jù)所述待移動的數(shù)據(jù)信息，從數(shù)據(jù)倉庫中得到所述待移動數(shù)據(jù)信息指向熱存儲區(qū)域的映射路徑；

根據(jù)所述待移動的數(shù)據(jù)信息，在冷存儲區(qū)域根據(jù)預(yù)設(shè)的路徑生成規(guī)則生成對應(yīng)的存儲路徑；

將所述待移動的數(shù)據(jù)信息從熱存儲區(qū)域復(fù)制到冷存儲區(qū)域?qū)?yīng)的存儲路徑下；

修改所述待移動的數(shù)據(jù)信息在數(shù)據(jù)倉庫中的映射路徑，所述映射路徑指向冷存儲區(qū)域?qū)?yīng)的存儲路徑；

刪除所述熱存儲區(qū)域中存儲的所述待移動的數(shù)據(jù)信息。

作為本發(fā)明一實施方式的進一步改進，所述預(yù)設(shè)的路徑生成規(guī)則是根據(jù)存儲區(qū)域類型、日期和業(yè)務(wù)類型來生成路徑。

作為本發(fā)明一實施方式的進一步改進，所述預(yù)設(shè)的數(shù)據(jù)移動規(guī)則，包括基于業(yè)務(wù)優(yōu)先級進行移動、基于創(chuàng)建/訪問時間進行移動、基于數(shù)據(jù)分層進行移動，其中，所述預(yù)設(shè)的數(shù)據(jù)移動規(guī)則的優(yōu)先級從高到低依次為基于業(yè)務(wù)優(yōu)先級進行移動、基于創(chuàng)建/訪問時間進行移動、基于數(shù)據(jù)分層進行移動。

作為本發(fā)明一實施方式的進一步改進，所述基于業(yè)務(wù)優(yōu)先級進行移動，是指企業(yè)重要維度的數(shù)據(jù)信息存儲在熱存儲區(qū)域；

所述基于創(chuàng)建/訪問時間進行移動，是指將第一預(yù)定時段前創(chuàng)建的數(shù)據(jù)信息或第二預(yù)定時間段內(nèi)沒有被訪問的數(shù)據(jù)信息，移動到冷數(shù)據(jù)存儲區(qū)域；