[發(fā)明專利]一種提高存儲系統(tǒng)處理小文件的方法以及存儲系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201610098733.2
• 申請日: 2016-02-23
• 公開（公告）號: CN105787012B
• 公開（公告）日: 2019-08-27
• 發(fā)明（設(shè)計）人: 劉凱;林濤睿;李俊宗;劉茜熙
• 申請（專利權(quán)）人: 深圳市瑞馳信息技術(shù)有限公司
• 主分類號: G06F16/13
• 分類號: G06F16/13;G06F16/16
• 代理公司: 深圳市六加知識產(chǎn)權(quán)代理有限公司 44372
• 代理人: 宋建平

本發(fā)明公開了一種提高存儲系統(tǒng)處理小文件的方法以及存儲系統(tǒng)，所述存儲系統(tǒng)包括第一存儲空間、第二存儲空間和第三存儲空間，所述第二存儲空間的讀寫性能優(yōu)于第一存儲空間的讀寫性能，所述方法包括：接收待存儲文件；判斷待存儲文件的大小是否大于閾值；若大于閾值，將所述待存儲文件存儲至第一存儲空間；若小于或等于閾值，將所述待存儲文件存儲至第二存儲空間；將所述待存儲文件的文件標(biāo)識、大小以及所述待存儲文件在第一存儲空間或者第二存儲空間的存儲地址存儲至元數(shù)據(jù),并建立所述待存儲文件的文件標(biāo)識、大小和存儲地址之間的對應(yīng)關(guān)系。通過上述方式，本發(fā)明能夠提高對大小小于閾值的文件的讀寫速度。

技術(shù)領(lǐng)域

本發(fā)明涉及存儲處理技術(shù)領(lǐng)域，特別是涉及一種提高存儲系統(tǒng)處理小文件的方法以及存儲系統(tǒng)。

背景技術(shù)

隨著科學(xué)技術(shù)的發(fā)展，電子設(shè)備越來越小，人們越來越喜歡通過電子設(shè)備進(jìn)行辦公、學(xué)習(xí)、娛樂等等。

為了方便異地取數(shù)據(jù)，用戶越來越喜歡將數(shù)據(jù)存儲在云端的存儲系統(tǒng)，由此造成云端的存儲系統(tǒng)所存儲的數(shù)據(jù)呈現(xiàn)爆炸性的增長，存儲系統(tǒng)也越來越龐大。龐大的存儲數(shù)據(jù)對存儲系統(tǒng)的處理性能也提出更高的要求。為了應(yīng)對龐大的存儲數(shù)據(jù)，傳統(tǒng)存儲系統(tǒng)主要通過增加處理器的方式來提高處理性能，其成本非常昂貴。

在本申請的發(fā)明人在長期的研究中發(fā)現(xiàn)：大部份的存儲系統(tǒng)中所存儲的數(shù)據(jù)中大部分文件都是小于1M的小文件，在某些應(yīng)用場景下，小文件的數(shù)量可達(dá)到千萬級別以上，并且小文件的讀寫頻率也非常高，但是傳統(tǒng)存儲系統(tǒng)沒有區(qū)別小文件和大文件，而統(tǒng)一存儲，因此，很多時候，存儲系統(tǒng)頻繁讀寫小文件的極限為存儲系統(tǒng)的性能瓶頸。

發(fā)明內(nèi)容

本發(fā)明主要解決的技術(shù)問題是提供一種提高存儲系統(tǒng)處理小文件的方法以及存儲系統(tǒng)，能夠提高對大小小于閾值的文件的讀寫速度。

為解決上述技術(shù)問題，本發(fā)明采用的一個技術(shù)方案是：提供一種提高存儲系統(tǒng)處理小文件的方法，存儲系統(tǒng)包括第一存儲空間、第二存儲空間和第三存儲空間，所述第二存儲空間的讀寫性能優(yōu)于第一存儲空間的讀寫性能，所述方法包括：接收待存儲文件；判斷待存儲文件的大小是否大于閾值；若大于閾值，將所述待存儲文件存儲至第一存儲空間；若小于或等于閾值，將所述待存儲文件存儲至第二存儲空間；將所述待存儲文件的文件標(biāo)識、大小以及所述待存儲文件在第一存儲空間或者第二存儲空間的存儲地址存儲至元數(shù)據(jù),并建立所述待存儲文件的文件標(biāo)識、大小和存儲地址之間的對應(yīng)關(guān)系。

其中，所述方法包括：接收文件增加請求，其中，所述文件增加請求攜帶待增內(nèi)容和待增文件的文件標(biāo)識；根據(jù)所述待增文件的文件標(biāo)識，從所述第三存儲空間獲取所述待增文件所存儲的存儲地址和待增文件的大小；根據(jù)所述待增文件的大小，判斷所述待增文件是否存儲在第二存儲空間；若是，則判斷所述待增內(nèi)容的大小和待增文件的大小之和是否大于閾值；若大于閾值，則根據(jù)所述待增文件所存儲的存儲地址獲取待增文件，并將所述待增文件轉(zhuǎn)移至第一存儲空間；將所述待增內(nèi)容存儲至待增文件中，并將所述待增文件在第一存儲空間的存儲地址以及增加內(nèi)容后的待增文件的大小更新至第三存儲空間。

其中，所述方法包括：接收文件內(nèi)容刪除請求，其中，所述文件內(nèi)容刪除請求攜帶待刪文件的文件標(biāo)識和刪除標(biāo)識；根據(jù)所述待刪文件的文件標(biāo)識，從所述第三存儲空間獲取所述待刪文件所存儲的存儲地址和待刪文件的大小；根據(jù)所述待刪文件所存儲的存儲地址，獲取所述待刪文件，并結(jié)合刪除標(biāo)識對所述待刪文件的內(nèi)容進(jìn)行刪除；根據(jù)待刪文件的大小，判斷所述待刪文件是否位于第一存儲空間，以及判斷刪除內(nèi)容后的待刪除文件的大小是否小于或者等于閾值；若所述待刪文件位于第一存儲空間，以及刪除內(nèi)容后的所述待刪除文件的大小小于或者等于閾值，則將所述刪除內(nèi)容后的待刪除文件轉(zhuǎn)移至第二存儲空間，并將所述待刪除文件在第二存儲空間中的存儲地址以及刪除內(nèi)容后的所述待刪除文件的大小更新至第三存儲空間。