[發(fā)明專利]海量圖片的處理系統(tǒng)及其方法

無效

• 申請(qǐng)?zhí)枺?/td>: 201110214026.2
• 申請(qǐng)日: 2011-07-28
• 公開（公告）號(hào): CN102904917A
• 公開（公告）日: 2013-01-30
• 發(fā)明（設(shè)計(jì)）人: 王春露;劉川意;顏志超;汪東升;頡夏青
• 申請(qǐng)（專利權(quán)）人: 北京郵電大學(xué)
• 主分類號(hào): H04L29/08
• 分類號(hào): H04L29/08
• 代理公司: 北京路浩知識(shí)產(chǎn)權(quán)代理有限公司 11002
• 代理人: 王瑩

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)存儲(chǔ)技術(shù)領(lǐng)域，尤其涉及一種海量圖片的處理系統(tǒng)及其方法。

背景技術(shù)

隨著信息化程度的不斷提高、網(wǎng)絡(luò)技術(shù)的飛速發(fā)展以及數(shù)據(jù)量的飛速增長，數(shù)據(jù)對(duì)于個(gè)人和企業(yè)的重要性日益凸現(xiàn)，存儲(chǔ)技術(shù)在其中起到的作用日益增加。傳統(tǒng)的存儲(chǔ)架構(gòu)擴(kuò)展性較差，當(dāng)用戶容量及性能需求增加時(shí)，只能一味地添加高端存儲(chǔ)設(shè)備，導(dǎo)致存儲(chǔ)環(huán)境日益復(fù)雜，管理和運(yùn)營成本提高，數(shù)據(jù)備份安全性相對(duì)較差，并會(huì)帶來過高的能源消耗。并且，過于復(fù)雜的存儲(chǔ)架構(gòu)和備份方式也很難滿足用戶日漸增長的數(shù)據(jù)管理和數(shù)據(jù)容災(zāi)需求。

發(fā)明內(nèi)容

(一)要解決的技術(shù)問題

本發(fā)明要解決的技術(shù)問題是：提供一種海量圖片的處理系統(tǒng)及其方法，其能夠擴(kuò)展性強(qiáng)、成本低，使數(shù)據(jù)備份安全可靠，并且節(jié)約了能源。另外，本發(fā)明極大地提高了數(shù)據(jù)訪問的速度。

(二)技術(shù)方案

為解決上述問題，本發(fā)明提供了一種海量圖片的處理系統(tǒng)，包括負(fù)載均衡服務(wù)器、元數(shù)據(jù)存儲(chǔ)服務(wù)器集群和數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器集群；其中，

所述元數(shù)據(jù)存儲(chǔ)服務(wù)器集群和數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器集群分別與所述負(fù)載均衡服務(wù)器連接；

所述數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器集群包括：數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器、多個(gè)數(shù)據(jù)內(nèi)容緩存服務(wù)器和多個(gè)數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器OSN；其中，

所述數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器，與所述數(shù)據(jù)內(nèi)容緩存服務(wù)器連接，用于將用戶請(qǐng)求發(fā)送給負(fù)載最輕的數(shù)據(jù)內(nèi)容緩存服務(wù)器；

所述數(shù)據(jù)內(nèi)容緩存服務(wù)器，與所述OSN連接，用于緩存訪問頻率較高的圖片并從所述OSN獲取圖片；

所述元數(shù)據(jù)存儲(chǔ)服務(wù)器集群包括：元數(shù)據(jù)負(fù)載均衡服務(wù)器和多個(gè)元數(shù)據(jù)存儲(chǔ)服務(wù)器；所述元數(shù)據(jù)負(fù)載均衡服務(wù)器，與所述元數(shù)據(jù)存儲(chǔ)服務(wù)器連接，用于將用戶請(qǐng)求發(fā)送給負(fù)載最輕的元數(shù)據(jù)存儲(chǔ)服務(wù)器。

一種利用前述海量圖片的處理系統(tǒng)對(duì)圖片進(jìn)行處理的方法，包括以下步驟：

A：接收用戶查看、存儲(chǔ)、更新或刪除圖片數(shù)據(jù)的請(qǐng)求并發(fā)送給負(fù)載均衡服務(wù)器；

B：所述負(fù)載均衡服務(wù)器將所述請(qǐng)求發(fā)送給數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器或者數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器和元數(shù)據(jù)負(fù)載均衡服務(wù)器；

用戶查看圖片時(shí)，負(fù)載均衡服務(wù)器將所述請(qǐng)求發(fā)送給數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器。

用戶存儲(chǔ)、更新或刪除圖片時(shí)，負(fù)載均衡服務(wù)器將所述請(qǐng)求同時(shí)發(fā)送給數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器和元數(shù)據(jù)負(fù)載均衡服務(wù)器。

C：數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器將請(qǐng)求發(fā)送給負(fù)載最輕的數(shù)據(jù)內(nèi)容緩存服務(wù)器或者數(shù)據(jù)內(nèi)容緩存負(fù)載均衡服務(wù)器和元數(shù)據(jù)負(fù)載均衡服務(wù)器將請(qǐng)求發(fā)送給負(fù)載最輕的OSN和元數(shù)據(jù)存儲(chǔ)服務(wù)器；

本步驟平衡了數(shù)據(jù)存儲(chǔ)服務(wù)器和元數(shù)據(jù)存儲(chǔ)服務(wù)器的壓力，提高了系統(tǒng)利用率，同時(shí)也提升了系統(tǒng)的運(yùn)行速度。

D：對(duì)圖片進(jìn)行查看、存儲(chǔ)、更新或刪除。

優(yōu)選地，所述步驟D中，對(duì)圖片進(jìn)行查看包括以下步驟：

D11：若未在當(dāng)前數(shù)據(jù)內(nèi)容緩存服務(wù)器上找到用戶請(qǐng)求的圖片，則執(zhí)行步驟D12；

D12：所述數(shù)據(jù)內(nèi)容緩存服務(wù)器在其兄弟節(jié)點(diǎn)間查看用戶請(qǐng)求的圖片是否存在于其他數(shù)據(jù)內(nèi)容緩存服務(wù)器中，若是，則返回該圖片；若否，則執(zhí)行步驟D13；

D13：所述數(shù)據(jù)內(nèi)容緩存服務(wù)器向數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器發(fā)送獲取圖片的請(qǐng)求，所述數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器讀取圖片并返回給所述數(shù)據(jù)內(nèi)容緩存服務(wù)器，數(shù)據(jù)內(nèi)容緩存服務(wù)器響應(yīng)用戶請(qǐng)求并把所獲圖片添加到所述數(shù)據(jù)內(nèi)容緩存服務(wù)器的內(nèi)存中。

優(yōu)選地，所述步驟D中，對(duì)圖片進(jìn)行存儲(chǔ)包括：通過設(shè)置元數(shù)據(jù)服務(wù)器之間的heartbeat，使多個(gè)元數(shù)據(jù)服務(wù)器相互拷貝數(shù)據(jù)。

優(yōu)選地，所述步驟D中，對(duì)圖片進(jìn)行存儲(chǔ)包括：將圖片的元數(shù)據(jù)存儲(chǔ)到所述元數(shù)據(jù)存儲(chǔ)服務(wù)器，將圖片存儲(chǔ)到數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器。

優(yōu)選地，所述步驟D中，對(duì)圖片進(jìn)行存儲(chǔ)還包括：通過配置數(shù)據(jù)內(nèi)容緩存服務(wù)器，把訪問頻率較高的圖片存儲(chǔ)到數(shù)據(jù)內(nèi)容緩存服務(wù)器的內(nèi)存中。

優(yōu)選地，所述步驟D中，對(duì)圖片進(jìn)行更新或刪除包括：更新或刪除所述元數(shù)據(jù)存儲(chǔ)服務(wù)器上的圖片的元數(shù)據(jù)和所述數(shù)據(jù)內(nèi)容存儲(chǔ)服務(wù)器上的圖片。

優(yōu)選地，所述步驟A還包括：生成通用唯一識(shí)別碼UUID來標(biāo)識(shí)用戶需查看、存儲(chǔ)、更新或刪除的圖片數(shù)據(jù)的步驟。

優(yōu)選地，所述圖片的元數(shù)據(jù)包括圖片名、圖片大小、圖片上傳日期、圖片的存儲(chǔ)位置。

(三)有益效果