[發明專利]一種基于Hbase的海量圖片存儲方法及裝置

在審

• 申請號: 201410425822.4
• 申請日: 2014-08-26
• 公開（公告）號: CN104199899A
• 公開（公告）日: 2014-12-10
• 發明（設計）人: 房體盈;辛國茂
• 申請（專利權）人: 浪潮（北京）電子信息產業有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京安信方達知識產權代理有限公司 11262
• 代理人: 王丹;李丹

1.一種基于Hbase的海量圖片存儲方法，其特征在于，包括：

讀取預設大小的結構化文本信息，并創建一個Mapfile文件；其中，結構化文本信息包括圖片的屬性信息與圖片的原始索引信息；

確定讀取的預設大小的結構化文本信息所對應的各個圖片，將確定的各個圖片以字節流的形式寫入到已建立的Mapfile文件中；

將讀取的預設大小的結構化文本信息中的各個圖片的屬性信息以及各個圖片所在的Mapfile文件的索引信息存儲至HBase表中。

2.根據權利要求1所述的方法，其特征在于，在所述讀取預設大小的結構化文本信息之前，該方法還包括：

啟動MapReduce任務，預先設置待處理的結構化文本信息路徑，獲取待處理的結構化文本信息；

將待處理的結構化文本信息分成多個大小為預設大小的結構化文本信息。

3.根據權利要求1或2所述的方法，其特征在于，所述圖片的屬性信息包括：圖片的大小、和圖片的名稱、和圖片的類型、和創建時間、和修改時間。

4.根據權利要求1或2所述的方法，其特征在于，所述確定讀取的預設大小的結構化文本信息所對應的各個圖片包括：

在讀取的預設大小的結構化文本信息中，獲取所述讀取的預設大小的結構化文本信息所對應的各個圖片的原始索引信息；

根據獲得的各個圖片的原始索引信息找到各個圖片。

5.根據權利要求1所述的方法，其特征在于，所述將確定的各個圖片以字節流的形式寫入到已建立的Mapfile文件中包括：

設置所述建立的Mapfile文件中第一列為Key值，設置第二列為Value值；

其中，將所述圖片的名稱寫入Key值所在的列，將所述圖片的字節流寫入Value值所在的列。

6.根據權利要求1所述的方法，其特征在于，所述各個圖片所在的Mapfile文件的索引信息包括：所述Mapfile文件中各個圖片的名稱以及所述各個圖片所在的Mapfile文件的索引。

7.一種基于Hbase的海量圖片存儲裝置，其特征在于，包括：讀取模塊、圖片寫入模塊、關系存儲模塊；其中，

讀取模塊，用于讀取預設大小的結構化文本信息，并創建一個Mapfile文件；其中，結構化文本信息包括圖片的屬性信息與圖片的原始索引信息；

圖片寫入模塊，用于確定讀取的預設大小的結構化文本信息所對應的各個圖片，將確定的各個圖片以字節流的形式寫入到已建立的Mapfile文件中；

關系存儲模塊，用于將讀取的預設大小的結構化文本信息中的各個圖片的屬性信息以及各個圖片所在的Mapfile文件的索引信息存儲至HBase表中。

8.根據權利要求7所述的裝置，其特征在于，所述裝置還包括配置模塊，用于

啟動MapReduce任務，預先設置待處理的結構化文本信息路徑，獲取待處理的結構化文本信息；

將待處理的結構化文本信息分成多個大小為預設大小的結構化文本信息。

9.根據權利要求7或8所述的裝置，其特征在于，所述圖片的屬性信息包括：圖片的大小、和圖片的名稱、和圖片的類型、和創建時間、和修改時間。

10.根據權利要求7或8所述的裝置，其特征在于，所述圖片寫入模塊具體用于：

在讀取的預設大小的結構化文本信息中，獲取所述讀取的預設大小的結構化文本信息所對應的各個圖片的原始索引信息；

根據獲得的各個圖片的原始索引信息找到各個圖片。

11.根據權利要求7所述的裝置，其特征在于，所述圖片寫入模塊還用于：

設置所述建立的Mapfile文件中第一列為Key值，設置第二列為Value值；

其中，將所述圖片的名稱寫入Key值所在的列，將所述圖片的字節流寫入Value值所在的列。

12.根據權利要求7所述的裝置，其特征在于，所述各個圖片所在的Mapfile文件的索引信息包括：所述Mapfile文件中各個圖片的名稱以及所述各個圖片所在的Mapfile文件的索引。