[發(fā)明專利]一種基于云計(jì)算平臺(tái)的海量圖片并行處理方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201310365091.4
• 申請(qǐng)日: 2013-08-20
• 公開（公告）號(hào): CN103473121A
• 公開（公告）日: 2013-12-25
• 發(fā)明（設(shè)計(jì)）人: 張亮;沈沛意;宋娟;董洛兵;王劍;胡正川;孫庚澤
• 申請(qǐng)（專利權(quán)）人: 西安電子科技大學(xué)
• 主分類號(hào): G06F9/46
• 分類號(hào): G06F9/46;G06F17/30;H04L29/06
• 代理公司: 杭州天勤知識(shí)產(chǎn)權(quán)代理有限公司 33224
• 代理人: 胡紅娟

1.一種基于云計(jì)算平臺(tái)的海量圖片并行處理方法，基于云計(jì)算的分布式并行計(jì)算模型，該模型包括客戶端、數(shù)據(jù)存儲(chǔ)服務(wù)器，一個(gè)主節(jié)點(diǎn)和多個(gè)任務(wù)節(jié)點(diǎn)，其交互過程主要包括以下幾個(gè)步驟：

1）客戶端將分配策略、處理代碼和儲(chǔ)存在數(shù)據(jù)存儲(chǔ)服務(wù)器中待處理的圖片信息遞交至主節(jié)點(diǎn)；

2）主節(jié)點(diǎn)依據(jù)接收到的圖片信息，對(duì)數(shù)據(jù)存儲(chǔ)服務(wù)器中的圖片進(jìn)行遍歷，得到圖片信息對(duì)應(yīng)的圖片位置信息，并對(duì)圖片位置信息依據(jù)分配策略進(jìn)行分包，然后將分包及所述處理代碼傳送至各任務(wù)節(jié)點(diǎn)；

3）各任務(wù)節(jié)點(diǎn)讀取所接收到的分包中的圖片位置信息，然后根據(jù)圖片位置信息從數(shù)據(jù)存儲(chǔ)服務(wù)器中讀取相應(yīng)的圖片，并根據(jù)處理代碼對(duì)圖片進(jìn)行并行處理；

4）各任務(wù)節(jié)點(diǎn)將處理后的圖片存儲(chǔ)在數(shù)據(jù)存儲(chǔ)服務(wù)器中，并將圖片的處理狀態(tài)信息反饋給主節(jié)點(diǎn)。

2.如權(quán)利要求1所述的基于云計(jì)算平臺(tái)的海量圖片并行處理方法，其特征在于，所述圖片包括海量的小圖片，所述的分包中包括對(duì)應(yīng)的小圖片在數(shù)據(jù)存儲(chǔ)服務(wù)器的位置信息。

3.如權(quán)利要求1所述的基于云計(jì)算平臺(tái)的海量圖片并行處理方法，其特征在于，所述圖片為單個(gè)大圖片，且大圖片大于100兆。

4.如權(quán)利要求3所述的基于云計(jì)算平臺(tái)的海量圖片并行處理方法，其特征在于，所述主節(jié)點(diǎn)將大圖片分割成若干小圖片并對(duì)小圖片進(jìn)行排序，所述分包中包括大圖片的位置信息和每個(gè)小圖片的分割片段信息，所述的分割片段信息包括對(duì)應(yīng)小圖片的分片ID、偏移和長(zhǎng)度信息。

5.如權(quán)利要求4所述的基于云計(jì)算平臺(tái)的海量圖片并行處理方法，其特征在于，在所述的步驟3）中，所述主節(jié)點(diǎn)將處理完的小圖片依據(jù)排序信息拼接成相應(yīng)的大圖片。

6.如權(quán)利要求1所述的基于云計(jì)算平臺(tái)的海量圖片并行處理方法，其特征在于，所述圖片為沒有進(jìn)行編碼壓縮的文件。

7.如權(quán)利要求1所述的基于云計(jì)算平臺(tái)的海量圖片并行處理方法，其特征在于，所述圖片的格式為壓縮過的圖片格式，在步驟2）中，主節(jié)點(diǎn)需首先對(duì)圖片進(jìn)行解壓。

8.如權(quán)利要求1所述的基于云計(jì)算平臺(tái)的海量圖片并行處理方法，其特征在于，所述各任務(wù)節(jié)點(diǎn)處理完圖片后生成相應(yīng)的日志文件，并保存在數(shù)據(jù)存儲(chǔ)服務(wù)器中。