[發(fā)明專利]數(shù)據(jù)管理系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110546107.6
• 申請(qǐng)日: 2021-05-19
• 公開（公告）號(hào): CN113485961A
• 公開（公告）日: 2021-10-08
• 發(fā)明（設(shè)計(jì)）人: 孫偉樂;程勇
• 申請(qǐng)（專利權(quán)）人: 江蘇開放大學(xué)（江蘇城市職業(yè)學(xué)院）
• 主分類號(hào): G06F16/13
• 分類號(hào): G06F16/13;G06F16/178;G06F16/182;G06F11/14;G06F9/48;G06F3/06
• 代理公司: 南京經(jīng)緯專利商標(biāo)代理有限公司 32200
• 代理人: 闞夢(mèng)詩

本申請(qǐng)實(shí)施例提供了一種數(shù)據(jù)管理系統(tǒng)，包括：文件管理模塊，配置為設(shè)置統(tǒng)一的本地磁盤與網(wǎng)盤的交互接口，并建立文件目錄，其中，網(wǎng)盤包括一個(gè)或多個(gè)，文件目錄用于索引所述本地磁盤與網(wǎng)盤內(nèi)存儲(chǔ)的文件；網(wǎng)絡(luò)傳輸模塊，連接文件管理模塊，配置為使用多工作線程的傳輸方式，與本地磁盤或所述網(wǎng)盤進(jìn)行文件傳輸；任務(wù)管理模塊，連接網(wǎng)絡(luò)傳輸模塊，配置為管理傳輸文件的任務(wù)，其中，不同的任務(wù)對(duì)應(yīng)于不同的優(yōu)先級(jí)和不同數(shù)量的工作線程；網(wǎng)盤管理模塊，連接網(wǎng)絡(luò)傳輸模塊，配置為與不同的網(wǎng)盤進(jìn)行通信連接。

技術(shù)領(lǐng)域

本申請(qǐng)涉及數(shù)據(jù)傳輸技術(shù)領(lǐng)域，具體而言，涉及一種數(shù)據(jù)管理系統(tǒng)。

背景技術(shù)

隨著計(jì)算機(jī)技術(shù)的發(fā)展，社會(huì)已經(jīng)步入信息化時(shí)代，數(shù)據(jù)承載著各種信息，需要在不同的終端進(jìn)行傳遞和交互，數(shù)據(jù)存儲(chǔ)已成為個(gè)人企事業(yè)單位的必要需求。過去數(shù)據(jù)主要存儲(chǔ)在個(gè)人、企事業(yè)單位的存儲(chǔ)設(shè)備中，數(shù)據(jù)傳遞需要移動(dòng)存儲(chǔ)設(shè)備，常會(huì)出現(xiàn)移動(dòng)存儲(chǔ)設(shè)備的遺忘、丟失和資源浪費(fèi)等問題，給用戶造成不便和困擾。

為了解決該問題，各互聯(lián)網(wǎng)公司陸續(xù)推出各自的數(shù)據(jù)服務(wù)中心，即網(wǎng)盤。各互聯(lián)網(wǎng)公司為了占領(lǐng)市場(chǎng)，擴(kuò)大影響，為用戶提供免費(fèi)的存儲(chǔ)空間。用戶可以把數(shù)據(jù)資源存儲(chǔ)在網(wǎng)盤中，可以通過網(wǎng)絡(luò)，隨時(shí)隨地存儲(chǔ)、訪問、備份、編輯、使用和共享數(shù)據(jù)資源。為用戶節(jié)約了資源，提供了方便，目前越來越多個(gè)人用戶傾向于將大量數(shù)據(jù)存放在網(wǎng)絡(luò)數(shù)據(jù)中心，數(shù)據(jù)存儲(chǔ)由分散存儲(chǔ)逐步走向集中存儲(chǔ)。

由于網(wǎng)盤成本高昂，各網(wǎng)絡(luò)公司推出的免費(fèi)網(wǎng)盤一般容量較小，而且為了防止用戶濫用網(wǎng)盤資源，通常限制網(wǎng)盤單個(gè)文件大小和傳輸速度。用戶為了降低成本滿足存儲(chǔ)需求常會(huì)申請(qǐng)多個(gè)網(wǎng)盤。但是不同公司的網(wǎng)盤需要不同的客戶端和賬號(hào)，網(wǎng)盤間無法進(jìn)行數(shù)據(jù)互通，用戶使用數(shù)據(jù)時(shí)需要頻繁的在不同公司的網(wǎng)盤間切換，造成了極大不便。

針對(duì)相關(guān)技術(shù)中，不同公司的網(wǎng)盤之間數(shù)據(jù)無法互通導(dǎo)致用戶使用數(shù)據(jù)不便的問題，目前尚未有有效的解決辦法。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種數(shù)據(jù)管理系統(tǒng)，以至少解決相關(guān)技術(shù)中不同公司的網(wǎng)盤之間數(shù)據(jù)無法互通導(dǎo)致用戶使用數(shù)據(jù)不便的問題。

在本申請(qǐng)的一個(gè)實(shí)施例中，提出了一種數(shù)據(jù)管理系統(tǒng)，包括：文件管理模塊，配置為設(shè)置統(tǒng)一的本地磁盤與網(wǎng)盤的交互接口，并建立文件目錄，其中，所述網(wǎng)盤包括一個(gè)或多個(gè)，所述文件目錄用于索引所述本地磁盤與所述網(wǎng)盤內(nèi)存儲(chǔ)的文件；網(wǎng)絡(luò)傳輸模塊，連接所述文件管理模塊，配置為使用多工作線程的傳輸方式，與所述本地磁盤或所述網(wǎng)盤進(jìn)行文件傳輸；任務(wù)管理模塊，連接所述網(wǎng)絡(luò)傳輸模塊，配置為管理傳輸文件的任務(wù)，其中，不同的所述任務(wù)對(duì)應(yīng)于不同的優(yōu)先級(jí)和不同數(shù)量的工作線程；網(wǎng)盤管理模塊，連接所述網(wǎng)絡(luò)傳輸模塊，配置為與不同的網(wǎng)盤進(jìn)行通信連接。

在一實(shí)施例中，所述文件管理模塊包括：文件目錄緩存單元，配置為根據(jù)所述本地磁盤與所述網(wǎng)盤內(nèi)存儲(chǔ)的文件，建立所述文件目錄；文件目錄索引單元，配置為根據(jù)所述文件目錄，進(jìn)行路徑檢索獲取所述文件的詳細(xì)信息；文件目錄獲取單元，配置為接受所述任務(wù)管理模塊的調(diào)度，根據(jù)所述路徑檢索的結(jié)果獲取所述本地磁盤與所述網(wǎng)盤內(nèi)存儲(chǔ)的文件。

在一實(shí)施例中，所述文件目錄緩存單元還配置為：每隔指定的時(shí)間周期，或在檢測(cè)到所述網(wǎng)盤內(nèi)文件發(fā)生變化時(shí)，更新所述文件目錄。

在一實(shí)施例中，所述網(wǎng)絡(luò)傳輸模塊包括：多線程加速單元，配置為打開多個(gè)連接到目標(biāo)文件的工作線程，實(shí)現(xiàn)針對(duì)所述目標(biāo)文件的多線路數(shù)據(jù)傳輸；斷點(diǎn)續(xù)傳單元，配置為對(duì)文件傳輸過程中的傳輸數(shù)據(jù)進(jìn)行本地保存；多線程部署單元，配置為對(duì)所述工作線程的數(shù)量進(jìn)行協(xié)調(diào)。

在一實(shí)施例中，所述斷點(diǎn)續(xù)傳單元還配置為，通過讀取本地保存的任務(wù)數(shù)據(jù)快速還原之前的任務(wù)數(shù)據(jù)，其中，所述任務(wù)數(shù)據(jù)包括需要傳輸?shù)奈募换謴?fù)任務(wù)數(shù)據(jù)或創(chuàng)建了新的任務(wù)后，重新保存最新的任務(wù)數(shù)據(jù)，并在接下來的執(zhí)行過程中同步更新；在需要傳輸部分?jǐn)?shù)據(jù)的情況下，向遠(yuǎn)程服務(wù)器傳遞范圍參數(shù)指定數(shù)據(jù)范圍；傳輸完成后，對(duì)需要合并文件的任務(wù)執(zhí)行文件并操作；任務(wù)完成報(bào)告主線程，移除相應(yīng)任務(wù)數(shù)據(jù)，刪除臨時(shí)文件。