[發(fā)明專利]數(shù)據(jù)外存儲方法

在審

• 申請?zhí)枺?/td>: 201711281753.4
• 申請日: 2017-12-07
• 公開（公告）號: CN108038168A
• 公開（公告）日: 2018-05-15
• 發(fā)明（設(shè)計(jì)）人: 盧春;黃文強(qiáng);彭向暉;邱文輝;栗春紅
• 申請（專利權(quán)）人: 中國南方航空股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 廈門致群專利代理事務(wù)所(普通合伙) 35224
• 代理人: 劉兆慶;陸慶紅

本發(fā)明公開了數(shù)據(jù)外存儲方法，其包括以下步驟：對外部存儲系統(tǒng)進(jìn)行管理、監(jiān)控、配置權(quán)限；針對待存儲數(shù)據(jù)，通過存儲操作模塊選擇外部存儲系統(tǒng)；驗(yàn)證所選擇外部存儲系統(tǒng)的操作權(quán)限；將待存儲數(shù)據(jù)轉(zhuǎn)換為約定格式后進(jìn)行存儲，并記錄文件信息；創(chuàng)建針對約定格式的待存儲數(shù)據(jù)的索引文件；基于索引文件，查找相應(yīng)數(shù)據(jù)的存儲位置并進(jìn)行下載或刪除操作。本發(fā)明能夠?qū)崿F(xiàn)數(shù)據(jù)外部存儲的多元化，企業(yè)可根據(jù)自身需要靈活選擇，降低了企業(yè)數(shù)據(jù)外部存儲的使用成本和維護(hù)成本。

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)存儲技術(shù)領(lǐng)域，特別涉及數(shù)據(jù)外存儲方法及系統(tǒng)。

背景技術(shù)

大數(shù)據(jù)時代，移動互聯(lián)、社交網(wǎng)絡(luò)、數(shù)據(jù)分析、云服務(wù)等應(yīng)用的迅速普及，對數(shù)據(jù)中心提出革命性的需求，存儲基礎(chǔ)架構(gòu)已經(jīng)成為IT核心之一。政府、軍隊(duì)軍工、科研院所、航空航天、大型商業(yè)連鎖、醫(yī)療、金融、新媒體、廣電等各個領(lǐng)域新興應(yīng)用層出不窮。數(shù)據(jù)的價值日益凸顯，數(shù)據(jù)已經(jīng)成為不可或缺的資產(chǎn)。作為數(shù)據(jù)載體和驅(qū)動力量，存儲系統(tǒng)成為大數(shù)據(jù)基礎(chǔ)架構(gòu)中最為關(guān)鍵的核心。

傳統(tǒng)的數(shù)據(jù)中心無論是在性能、效率，還是在投資收益、安全，已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足新興應(yīng)用的需求，數(shù)據(jù)中心業(yè)務(wù)急需新型大數(shù)據(jù)處理中心來支撐。除了傳統(tǒng)的高可靠、高冗余、綠色節(jié)能之外，新型的大數(shù)據(jù)中心還需具備虛擬化、模塊化、彈性擴(kuò)展、自動化等一系列特征，才能滿足具備大數(shù)據(jù)特征的應(yīng)用需求。這些史無前例的需求，讓存儲系統(tǒng)的架構(gòu)和功能都發(fā)生了前所未有的變化。

基于大數(shù)據(jù)應(yīng)用需求，“應(yīng)用定義存儲”概念被提出。存儲系統(tǒng)作為數(shù)據(jù)中心最核心的數(shù)據(jù)基礎(chǔ)，不再僅是傳統(tǒng)分散的、單一的底層設(shè)備。除了要具備高性能、高安全、高可靠等特征之外，還要有虛擬化、并行分布、自動分層、彈性擴(kuò)展、異構(gòu)資源整合、全局緩存加速等多方面的特點(diǎn)，才能滿足具備大數(shù)據(jù)特征的業(yè)務(wù)應(yīng)用需求。大數(shù)據(jù)對存儲設(shè)備的容量、讀寫性能、可靠性、擴(kuò)展性等都提出了更高的要求，需要充分考慮功能集成度、數(shù)據(jù)安全性、數(shù)據(jù)穩(wěn)定性，系統(tǒng)可擴(kuò)展性、性能及成本各方面因素。

目前市場上的存儲架構(gòu)主要包括以下幾種：

(1)基于嵌入式架構(gòu)的存儲系統(tǒng)

嵌入式系統(tǒng)是個大概念，對于有操作系統(tǒng)和文件系統(tǒng)的嵌入式系統(tǒng)(如嵌入式linux系統(tǒng))來說，它的數(shù)據(jù)存儲方式(文件)和標(biāo)準(zhǔn)的計(jì)算機(jī)系統(tǒng)區(qū)別不大，它除了支持一些特別的文件系統(tǒng)(如yaffs,jffs)外，還支持很多標(biāo)準(zhǔn)計(jì)算機(jī)系統(tǒng)實(shí)現(xiàn)了的文件系統(tǒng)(如ext2,ext3,fat等)及網(wǎng)絡(luò)文件系統(tǒng)。另外很多嵌入式系統(tǒng)還支持U盤、SD卡等設(shè)備，完全可以和標(biāo)準(zhǔn)文件系統(tǒng)進(jìn)行文件交換。嵌入式存儲交換技術(shù)的好處包括更高的可靠性、更好的性能以及在不降低性能的條件下添加硬盤的能力。

(2)基于X86架構(gòu)的存儲系統(tǒng)

基于X86架構(gòu)的存儲系統(tǒng)，比如HDFS分布式文件管理系統(tǒng)，其底層由大量的X86系統(tǒng)設(shè)備組成，在確保故障容錯能力和數(shù)據(jù)高可用的同時，能夠大大降低企業(yè)數(shù)據(jù)存儲成本。

(3)基于云技術(shù)的存儲系統(tǒng)

云存儲是在云計(jì)算(cloud computing)概念上延伸和發(fā)展出來的一個新的概念，是一種新興的網(wǎng)絡(luò)存儲技術(shù)，是指通過集群應(yīng)用、網(wǎng)絡(luò)技術(shù)或分布式文件系統(tǒng)等功能，將網(wǎng)絡(luò)中大量各種不同類型的存儲設(shè)備通過應(yīng)用軟件集合起來協(xié)同工作，共同對外提供數(shù)據(jù)存儲和業(yè)務(wù)訪問功能的系統(tǒng)。

目前，企業(yè)或事業(yè)單位需要將數(shù)據(jù)進(jìn)行外部存儲時，只能選擇單一的外部存儲架構(gòu)(如云存儲系統(tǒng))，而不能利用其自身擁有的外部存儲資源去靈活選擇，無疑也增加了企事業(yè)單位的數(shù)據(jù)外部存儲成本。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供數(shù)據(jù)外存儲方法，其能夠?qū)崿F(xiàn)數(shù)據(jù)外部存儲的多元化，企業(yè)可根據(jù)自身需要靈活選擇，降低了企業(yè)數(shù)據(jù)外部存儲的使用成本和維護(hù)成本。

為實(shí)現(xiàn)上述目的，本發(fā)明采用以下技術(shù)方案：