[發(fā)明專利]處理數(shù)據(jù)的方法、裝置及系統(tǒng)

有效

• 申請?zhí)枺?/td>: 200710090834.6
• 申請日: 2007-04-06
• 公開（公告）號: CN101282235A
• 公開（公告）日: 2008-10-08
• 發(fā)明（設(shè)計）人: 陳思儒;錢超
• 申請（專利權(quán)）人: 阿里巴巴集團(tuán)控股有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;H04L1/00
• 代理公司: 北京同達(dá)信恒知識產(chǎn)權(quán)代理有限公司
• 代理人: 魏杉

技術(shù)領(lǐng)域

本發(fā)明涉及計算機(jī)及通信技術(shù)領(lǐng)域，尤其涉及處理數(shù)據(jù)的方法、裝置及系統(tǒng)。

背景技術(shù)

隨著社會信息化進(jìn)程的推進(jìn)，人們將越來越多的信息以數(shù)據(jù)的形式在網(wǎng)絡(luò)上傳輸，而在數(shù)據(jù)傳輸?shù)倪^程中，數(shù)據(jù)的完整性非常重要。當(dāng)由于各種原因?qū)е聰?shù)據(jù)不能正常傳輸至目的設(shè)備時，可能的情況是，造成數(shù)據(jù)的丟失，嚴(yán)重影響目的設(shè)備接收數(shù)據(jù)的完整性，不利于后續(xù)對接收數(shù)據(jù)進(jìn)行正確的處理。

現(xiàn)有技術(shù)中，為了保證數(shù)據(jù)的完整性，提供了以下幾種不同的解決方案：

一、把多個應(yīng)用程序放在同一設(shè)備上，這樣，在處理該多個應(yīng)用程序時，無需數(shù)據(jù)傳輸，當(dāng)然，也就不會出現(xiàn)數(shù)據(jù)傳輸時發(fā)生中斷導(dǎo)致數(shù)據(jù)丟失的問題。但是，隨著應(yīng)用程序的擴(kuò)大，單一設(shè)備在性能、容量等方面無法滿足實(shí)際需要。

二、增加傳輸時的鏈路數(shù)目，這樣，在其中一條鏈路中斷的情況下，其他鏈路仍能進(jìn)行正常的數(shù)據(jù)傳輸。但是，這樣處理不能從根本上解決數(shù)據(jù)丟失的問題，例如，當(dāng)出現(xiàn)最壞的情況，即所有的鏈路均發(fā)生中斷，仍然會導(dǎo)致數(shù)據(jù)丟失。

三、將異常情況下未能成功傳輸?shù)臄?shù)據(jù)轉(zhuǎn)移到數(shù)據(jù)庫進(jìn)行存儲，這樣可以避免數(shù)據(jù)在傳輸至目的設(shè)備時發(fā)生丟失的問題，但是，由于整個系統(tǒng)引入了數(shù)據(jù)庫，因此會造成系統(tǒng)復(fù)雜度的增加，從而增加了系統(tǒng)的維護(hù)成本。

綜上，現(xiàn)有技術(shù)提供的解決方案的不足在于，不能從根本上解決數(shù)據(jù)傳輸過程中由于鏈路中斷而導(dǎo)致數(shù)據(jù)丟失的問題；或者，雖然解決了數(shù)據(jù)丟失的問題，但造成系統(tǒng)復(fù)雜度和維護(hù)成本的增加。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供一種處理數(shù)據(jù)的方法及系統(tǒng)，用以保證數(shù)據(jù)傳輸過程中發(fā)生鏈路中斷時數(shù)據(jù)的完整性，并降低系統(tǒng)復(fù)雜度和維護(hù)成本。

本發(fā)明實(shí)施例提供一種處理數(shù)據(jù)的方法，該方法包括步驟：

確認(rèn)數(shù)據(jù)傳輸過程中發(fā)生鏈路中斷；

將未成功傳輸?shù)臄?shù)據(jù)以數(shù)據(jù)塊形式存入包含文件頭的本地文件，其中，將與數(shù)據(jù)塊對應(yīng)的數(shù)據(jù)塊描述信息依次存入所述文件頭內(nèi)，并按數(shù)據(jù)塊描述信息包含的位置信息將數(shù)據(jù)塊存入所述本地文件中的相應(yīng)位置。

本發(fā)明實(shí)施例還提供一種數(shù)據(jù)處理裝置，包括：

第一確認(rèn)模塊，用于確認(rèn)數(shù)據(jù)傳輸過程中發(fā)生鏈路中斷；

存儲模塊，用于將未成功傳輸?shù)臄?shù)據(jù)以數(shù)據(jù)塊形式存入包含文件頭的本地文件，其中，將與數(shù)據(jù)塊對應(yīng)的數(shù)據(jù)塊描述信息依次存入所述文件頭內(nèi)，并按數(shù)據(jù)塊描述信息包含的位置信息將數(shù)據(jù)塊存入所述本地文件中的相應(yīng)位置。

本發(fā)明實(shí)施例還提供一種數(shù)據(jù)處理系統(tǒng)，包括：

數(shù)據(jù)處理裝置，用于在確認(rèn)數(shù)據(jù)傳輸過程中發(fā)生鏈路中斷時，將未成功傳輸?shù)臄?shù)據(jù)以數(shù)據(jù)塊形式存入包含文件頭的本地文件，其中，將與數(shù)據(jù)塊對應(yīng)的數(shù)據(jù)塊描述信息依次存入所述文件頭內(nèi)，并按數(shù)據(jù)塊描述信息包含的位置信息將數(shù)據(jù)塊存入所述本地文件中的相應(yīng)位置；以及，在確認(rèn)中斷的鏈路已恢復(fù)時，在所述文件頭中查找需要重新傳輸?shù)臄?shù)據(jù)塊對應(yīng)的數(shù)據(jù)塊描述信息，按數(shù)據(jù)塊描述信息包含的位置信息從所述本地文件中提取數(shù)據(jù)塊，并向其它設(shè)備提供數(shù)據(jù)塊描述信息及數(shù)據(jù)塊；

數(shù)據(jù)傳輸裝置，用于接收并在本地存儲所述數(shù)據(jù)處理裝置提供的數(shù)據(jù)塊描述信息，從所述數(shù)據(jù)處理裝置獲取本地存儲的數(shù)據(jù)塊描述信息指向的數(shù)據(jù)塊并進(jìn)行傳輸。

本發(fā)明實(shí)施例中，當(dāng)數(shù)據(jù)傳輸過程中發(fā)生鏈路中斷時，將未成功傳輸?shù)臄?shù)據(jù)以數(shù)據(jù)塊形式存入包含文件頭的本地文件，其中，將與數(shù)據(jù)塊對應(yīng)的數(shù)據(jù)塊描述信息依次存入文件頭內(nèi)，并按數(shù)據(jù)塊描述信息包含的位置信息將數(shù)據(jù)塊存入本地文件中的相應(yīng)位置，可以避免由于鏈路中斷造成的數(shù)據(jù)丟失，保證數(shù)據(jù)的完整性；由于采用文件方式進(jìn)行數(shù)據(jù)存儲，可以降低系統(tǒng)復(fù)雜度和維護(hù)成本；另外，通過文件頭中的數(shù)據(jù)塊描述信息可以快速定位數(shù)據(jù)塊在本地文件中的位置，特別是在存儲有大量數(shù)據(jù)時，方便數(shù)據(jù)的讀取。

附圖說明

圖1為本發(fā)明實(shí)施例中一種數(shù)據(jù)處理的流程圖；

圖2為本發(fā)明實(shí)施例中一種本地文件的結(jié)構(gòu)圖；

圖3為本發(fā)明實(shí)施例中一種將原本未成功傳輸?shù)臄?shù)據(jù)塊重新進(jìn)行傳輸?shù)奶幚砹鞒虉D；

圖4為本發(fā)明實(shí)施例中其它設(shè)備進(jìn)行數(shù)據(jù)處理的流程圖；

圖5、圖6、圖7為本發(fā)明實(shí)施例中一種數(shù)據(jù)處理裝置的結(jié)構(gòu)示意圖；

圖8、圖9、圖10為本發(fā)明實(shí)施例中一種數(shù)據(jù)處理裝置的結(jié)構(gòu)示意圖。

具體實(shí)施方式