[發(fā)明專利]一種海量小文件的存儲與檢索方法

無效

• 申請?zhí)枺?/td>: 201110435016.1
• 申請日: 2011-12-22
• 公開（公告）號: CN102419775A
• 公開（公告）日: 2012-04-18
• 發(fā)明（設(shè)計(jì)）人: 韓震華;余建成;曲建云;張皓
• 申請（專利權(quán)）人: 廈門雅迅網(wǎng)絡(luò)股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 廈門市新華專利商標(biāo)代理有限公司 35203
• 代理人: 朱凌

1.一種海量小文件的存儲與檢索的方法，其特征在于：主要包括數(shù)據(jù)庫、文件存儲模塊和文件檢索模塊，其中，數(shù)據(jù)庫中的文件存儲信息表，用于保存小文件的存儲信息，字段包括文件ID、存儲路徑、數(shù)據(jù)存儲開始位置和數(shù)據(jù)大小，該文件ID由系統(tǒng)自動生成，從1開始自增；具體步驟包括：

1、存儲步驟

步驟1、用戶在文件存儲模塊提供的界面上設(shè)置文件存儲路徑，記為“文件保存路徑”；

步驟2、當(dāng)文件存儲模塊收到來自某外層應(yīng)用的一個小文件存儲請求時，先獲取該小文件的大小，記為“當(dāng)前文件數(shù)據(jù)大小”；

同時，文件存儲模塊獲取當(dāng)前日期，包括年、月、日，并判斷“文件保存路徑”內(nèi)是否存在以當(dāng)前日期為名創(chuàng)建的文件夾，若不存在則創(chuàng)建文件夾，記為“當(dāng)前日期文件保存文件夾”?并打開該文件夾；若存在，則直接打開該文件夾；

文件存儲模塊進(jìn)而獲取當(dāng)前時刻，包括年、月、日、時，并判斷“當(dāng)前日期文件保存文件夾”內(nèi)是否存在以當(dāng)前時刻為名創(chuàng)建的文件夾，若不存在則創(chuàng)建文件夾，記為“當(dāng)前時刻文件保存文件夾”，?并打開該文件夾；若存在，則直接打開該文件夾；

文件存儲模塊進(jìn)一步獲取當(dāng)前分鐘，包括年、月、日、時、分，并判斷“當(dāng)前時刻文件保存文件夾”內(nèi)是否存在以當(dāng)前分鐘為名創(chuàng)建的文件，若不存在則創(chuàng)建文件，記為“當(dāng)前數(shù)據(jù)存儲文件”，文件存儲模塊獲取“當(dāng)前數(shù)據(jù)存儲文件”的最后存儲位置，記為“當(dāng)前文件數(shù)據(jù)存儲開始位置”；

文件存儲模塊將該發(fā)出存儲請求的小文件數(shù)據(jù)寫入到當(dāng)前文件數(shù)據(jù)存儲開始位置，與“當(dāng)前數(shù)據(jù)存儲文件”合并，更新“當(dāng)前數(shù)據(jù)存儲文件”，并保存在磁盤上；

步驟3、文件存儲模塊將“當(dāng)前日期文件保存文件夾”名、“當(dāng)前時刻文件保存文件夾”名和“當(dāng)前數(shù)據(jù)存儲文件”名，組合成“當(dāng)前文件存儲路徑”；

步驟4、文件存儲模塊將獲得的“當(dāng)前文件存儲路徑”、“當(dāng)前文件數(shù)據(jù)存儲開始位置”和“當(dāng)前文件數(shù)據(jù)大小”保存到數(shù)據(jù)庫的文件存儲信息表中相應(yīng)的“存儲路徑”、“數(shù)據(jù)存儲開始位置”和“數(shù)據(jù)大小”字段中，存儲完成后，數(shù)據(jù)庫自動生成文件ID；

步驟5、文件存儲模塊獲取數(shù)據(jù)庫返回的文件ID，并提交給上述發(fā)起小文件存儲請求的外層應(yīng)用，供該外層應(yīng)用后續(xù)檢索；

?2、檢索步驟

步驟1、用戶在文件檢索模塊提供的界面上設(shè)置臨時文件路徑，記為“臨時文件路徑”；

步驟2、文件檢索模塊收到來自某外層應(yīng)用的一個小文件檢索請求，請求內(nèi)容主要是文件ID，記為“待檢索文件ID”；

步驟3、該文件檢索模塊判斷“臨時文件路徑”內(nèi)的文件數(shù)量是否超過閾值，如果是，則刪除“臨時文件路徑”內(nèi)的所有文件；若“臨時文件路徑”內(nèi)的文件數(shù)量未超過閾值，則文件檢索模塊進(jìn)一步判斷“臨時文件路徑”內(nèi)是否存在以“待檢索文件ID”命名的文件，如果存在，則刪除該文件；

步驟4、文件檢索模塊從數(shù)據(jù)庫的文件存儲信息表中，讀取文件ID等于“待檢索文件ID”的文件存儲記錄；該文件檢索模塊根據(jù)獲取的文件存儲記錄中的“存儲路徑”字段，訪問存儲步驟中步驟1所設(shè)置的“文件保存路徑”中的相應(yīng)數(shù)據(jù)存儲文件，并根據(jù)“數(shù)據(jù)存儲開始位置”和“數(shù)據(jù)大小”字段，從數(shù)據(jù)存儲文件中讀取相應(yīng)的小文件數(shù)據(jù)；

步驟5、文件檢索模塊將上述讀取的小文件數(shù)據(jù)，在“臨時文件路徑”中，創(chuàng)建以“待檢索文件ID”命名的臨時小文件，記為“當(dāng)前臨時小文件”；

步驟6、文件檢索模塊將“臨時文件路徑”名和“當(dāng)前臨時小文件”名組合成“當(dāng)前文件臨時訪問路徑”，并提交給發(fā)起小文件檢索請求的外層應(yīng)用，供該外層應(yīng)用訪問。