[發(fā)明專利]一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201710607660.X
• 申請(qǐng)日: 2017-07-24
• 公開(kāi)（公告）號(hào): CN107479827A
• 公開(kāi)（公告）日: 2017-12-15
• 發(fā)明（設(shè)計(jì)）人: 顧友峰;陳大偉;韓欣
• 申請(qǐng)（專利權(quán)）人: 上海德拓信息技術(shù)股份有限公司
• 主分類號(hào): G06F3/06
• 分類號(hào): G06F3/06;H04L29/08
• 代理公司: 上海宣宜專利代理事務(wù)所(普通合伙)31288
• 代理人: 劉君

1.一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法，其特征在于：包括以下步驟：

步驟(1)客戶端通過(guò)標(biāo)準(zhǔn)RESTful API接口發(fā)送管理數(shù)據(jù)的請(qǐng)求至混合存儲(chǔ)系統(tǒng)；

步驟(2)網(wǎng)關(guān)層收到客戶端的請(qǐng)求之后，會(huì)對(duì)請(qǐng)求參數(shù)進(jìn)行合法性校驗(yàn)，驗(yàn)證通過(guò)后，轉(zhuǎn)發(fā)至元數(shù)據(jù)模塊；

步驟(3)元數(shù)據(jù)模塊收到請(qǐng)求后，將Json化的元數(shù)據(jù)信息推送至分布式鍵值存儲(chǔ)系統(tǒng)；

步驟(4)IO模塊收到請(qǐng)求后，存儲(chǔ)系統(tǒng)類選擇器根據(jù)參數(shù)將數(shù)據(jù)上傳至對(duì)應(yīng)的數(shù)據(jù)存儲(chǔ)系統(tǒng)；

步驟(5)：返回請(qǐng)求結(jié)果至客戶端，為了保證IO與元數(shù)據(jù)的一致性，只有IO模塊和元數(shù)據(jù)模塊同時(shí)操作成功的情況，才返回請(qǐng)求成功的標(biāo)志。

2.根據(jù)權(quán)利要求1所述的一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法，其特征在于：所述混合存儲(chǔ)系統(tǒng)包括文件系統(tǒng)存儲(chǔ)、對(duì)象存儲(chǔ)系統(tǒng)，在混合存儲(chǔ)系統(tǒng)中元數(shù)據(jù)處于一個(gè)中心位置，通過(guò)元數(shù)據(jù)模塊對(duì)元數(shù)據(jù)的解析，可實(shí)現(xiàn)將物理分布在多個(gè)地點(diǎn)的數(shù)據(jù)集成為統(tǒng)一的數(shù)據(jù)共享和訪問(wèn)管理的邏輯空間，以低成本、松耦合方式實(shí)現(xiàn)大量異構(gòu)數(shù)據(jù)資源的集中整合與共享。

3.根據(jù)權(quán)利要求1所述的一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法，其特征在于：所述元數(shù)據(jù)模塊收到請(qǐng)求后，會(huì)提取對(duì)象的元數(shù)據(jù)信息如創(chuàng)建時(shí)間，數(shù)據(jù)大小，以及數(shù)據(jù)擁有者等，然后將元數(shù)據(jù)信息以JSON的形式進(jìn)行描述，最后將Json化的元數(shù)據(jù)信息推送至分布式鍵值存儲(chǔ)系統(tǒng)；分布式鍵值存儲(chǔ)系統(tǒng)可以對(duì)元數(shù)據(jù)進(jìn)行索引，對(duì)外提供安全，可靠的元數(shù)據(jù)管理服務(wù)。

4.根據(jù)權(quán)利要求1所述的一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法，其特征在于：所述數(shù)據(jù)管理模塊包含結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)以及非結(jié)構(gòu)數(shù)據(jù)；結(jié)構(gòu)化數(shù)據(jù)包括數(shù)字、符號(hào)，半結(jié)構(gòu)化數(shù)據(jù)包括XML、HTML文檔，非結(jié)構(gòu)化數(shù)據(jù)包括全文文本、圖象、聲音、影視、超媒體。

5.根據(jù)權(quán)利要求1所述的一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法，其特征在于：所述網(wǎng)關(guān)層提供統(tǒng)一的RESTful API接口。

6.根據(jù)權(quán)利要求1所述的一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法，其特征在于：所述元數(shù)據(jù)模塊采用分布式架構(gòu)，可以提高元數(shù)據(jù)的可靠性以及大大降低元數(shù)據(jù)的響應(yīng)時(shí)間。

7.根據(jù)權(quán)利要求1所述的一種基于IO和元數(shù)據(jù)分離的混合存儲(chǔ)系統(tǒng)實(shí)現(xiàn)方法，其特征在于：所述存儲(chǔ)系統(tǒng)選擇器采用多種算法，包括基于UUID的存儲(chǔ)系統(tǒng)選擇算法、基于媒體類型的存儲(chǔ)系統(tǒng)選擇算法。