[發(fā)明專利]上傳文件的存儲(chǔ)方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201811637629.1
• 申請(qǐng)日: 2018-12-29
• 公開（公告）號(hào): CN109710194A
• 公開（公告）日: 2019-05-03
• 發(fā)明（設(shè)計(jì)）人: 王文魯
• 申請(qǐng)（專利權(quán)）人: 武漢思普崚技術(shù)有限公司
• 主分類號(hào): G06F3/06
• 分類號(hào): G06F3/06
• 代理公司: 北京弘權(quán)知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11363
• 代理人: 逯長(zhǎng)明;許偉群

本申請(qǐng)公開了一種上傳文件的存儲(chǔ)方法及裝置，所述方法包括：獲取上傳文件的文件數(shù)據(jù)；將文件數(shù)據(jù)劃分為至少一個(gè)數(shù)據(jù)塊；當(dāng)確定文件數(shù)據(jù)劃分出的第一個(gè)數(shù)據(jù)塊后，將劃分出的數(shù)據(jù)塊存儲(chǔ)至內(nèi)存的同一隊(duì)列中；當(dāng)將第一個(gè)數(shù)據(jù)塊存儲(chǔ)至隊(duì)列后，依次讀取隊(duì)列中的數(shù)據(jù)塊，并將讀取的數(shù)據(jù)塊寫入磁盤中的備份文件；在隊(duì)列中刪除讀取的數(shù)據(jù)塊。在本申請(qǐng)中，將文件數(shù)據(jù)劃分為數(shù)據(jù)塊，并將數(shù)據(jù)塊以隊(duì)列的形式存儲(chǔ)在內(nèi)存中，在存儲(chǔ)數(shù)據(jù)塊的同時(shí)，讀取隊(duì)列中的數(shù)據(jù)塊，并執(zhí)行寫入操作和刪除操作。避免了內(nèi)存被長(zhǎng)時(shí)間占用，能夠提高網(wǎng)絡(luò)設(shè)備的運(yùn)行效率；而且，由于無需將文件數(shù)據(jù)全部存儲(chǔ)至內(nèi)存，因此能夠備份數(shù)據(jù)量大的上傳文件。

技術(shù)領(lǐng)域

本申請(qǐng)涉及互聯(lián)網(wǎng)技術(shù)領(lǐng)域，特別涉及一種上傳文件的存儲(chǔ)方法及裝置。

背景技術(shù)

隨著云計(jì)算技術(shù)的發(fā)展，在云計(jì)算技術(shù)的基礎(chǔ)上延伸出云存儲(chǔ)系統(tǒng)的概念，云存儲(chǔ)系統(tǒng)是指利用集群應(yīng)用、網(wǎng)絡(luò)、分布式軟件等技術(shù)，將網(wǎng)絡(luò)中大量服務(wù)器通過軟件結(jié)合起來協(xié)同工作，共同對(duì)外提供數(shù)據(jù)存儲(chǔ)和業(yè)務(wù)訪問功能的系統(tǒng)，具備安全、低成本、高可靠性等特點(diǎn)。例如，將電腦中的數(shù)據(jù)上傳到網(wǎng)絡(luò)硬盤。越來越多的公司在日常工作中，要求工作人員將的文件資料等工作數(shù)據(jù)存入網(wǎng)絡(luò)硬盤，以防止因?yàn)殡娔X出現(xiàn)意外造成的文件丟失。同時(shí)，為了公司的信息安全，會(huì)通過網(wǎng)絡(luò)設(shè)備，如網(wǎng)關(guān)，備份記錄上傳到網(wǎng)盤的文件資料，從而能夠管理、審計(jì)員工使用網(wǎng)盤的行為，確保信息安全。

在現(xiàn)有技術(shù)中，用戶向網(wǎng)絡(luò)硬盤上傳文件時(shí)，能夠留存及還原上傳文件的網(wǎng)絡(luò)設(shè)備在自身傳輸?shù)臄?shù)據(jù)區(qū)塊中，識(shí)別出上傳文件的數(shù)據(jù)區(qū)塊。網(wǎng)絡(luò)設(shè)備再將上傳文件的全部數(shù)據(jù)緩存在自身的內(nèi)存中。當(dāng)緩存完成后，網(wǎng)絡(luò)設(shè)備將上傳文件的全部數(shù)據(jù)寫入磁盤，還原生成上傳文件。

由于現(xiàn)有技術(shù)需要將上傳文件的全部數(shù)據(jù)先緩存到內(nèi)存中，再寫入磁盤，導(dǎo)致有限的內(nèi)存空間被長(zhǎng)時(shí)間占用，阻礙網(wǎng)絡(luò)設(shè)備的其它進(jìn)程使用內(nèi)存，降低了網(wǎng)絡(luò)設(shè)備的運(yùn)行效率；而且，由于內(nèi)存的存儲(chǔ)空間通常較小，因此無法留存及還原數(shù)據(jù)量大的上傳文件。

發(fā)明內(nèi)容

本申請(qǐng)?zhí)峁┮环N上傳文件的存儲(chǔ)方法及裝置，可用于解決在現(xiàn)有技術(shù)中因?qū)⑸蟼魑募娜繑?shù)據(jù)先緩存到內(nèi)存中，再寫入磁盤，導(dǎo)致有限的內(nèi)存空間被長(zhǎng)時(shí)間占用，阻礙網(wǎng)絡(luò)設(shè)備的其它進(jìn)程使用內(nèi)存，降低了網(wǎng)絡(luò)設(shè)備的運(yùn)行效率；以及，由于內(nèi)存的存儲(chǔ)空間通常較小，因此無法留存及還原數(shù)據(jù)量大的上傳文件的問題。

第一方面，本申請(qǐng)?zhí)峁┮环N上傳文件的存儲(chǔ)方法，所述方法包括：

獲取上傳文件的數(shù)據(jù)區(qū)塊，所述數(shù)據(jù)區(qū)塊包括所述上傳文件的文件數(shù)據(jù)；

將所述文件數(shù)據(jù)劃分為至少一個(gè)數(shù)據(jù)塊；

當(dāng)確定所述文件數(shù)據(jù)劃分出的第一個(gè)數(shù)據(jù)塊后，將劃分出的數(shù)據(jù)塊存儲(chǔ)至內(nèi)存的同一隊(duì)列中；

當(dāng)將所述第一個(gè)數(shù)據(jù)塊存儲(chǔ)至所述隊(duì)列后，依次讀取所述隊(duì)列中的數(shù)據(jù)塊，并將讀取的數(shù)據(jù)塊寫入磁盤中的備份文件，所述備份文件為所述上傳文件的復(fù)制文件；

在所述隊(duì)列中刪除所述讀取的數(shù)據(jù)塊。

可選地，所述數(shù)據(jù)區(qū)塊還包括所述上傳文件的文件信息，所述文件信息用于唯一指示一個(gè)上傳文件，并且攜帶在所述隊(duì)列的數(shù)據(jù)塊中；

所述將讀取的數(shù)據(jù)塊寫入磁盤中的備份文件之前，還包括：

根據(jù)所述文件信息，檢測(cè)所述磁盤中是否存儲(chǔ)有所述備份文件；

若沒有所述備份文件，則創(chuàng)建所述備份文件，所述備份文件的文件名為所述文件信息。

可選地，所述將所述文件數(shù)據(jù)劃分為至少一個(gè)數(shù)據(jù)塊之后，還包括：

確定每個(gè)數(shù)據(jù)塊相對(duì)于所述文件數(shù)據(jù)的起始位置的偏移值，所述文件數(shù)據(jù)的起始位置是指所述文件數(shù)據(jù)的在所述上傳文件中的第一個(gè)字節(jié)的位置；

將所述偏移值添加至對(duì)應(yīng)的數(shù)據(jù)塊中。