[發明專利]一種基于流存儲的數據寫入方法有效
| 申請號: | 202210129817.3 | 申請日: | 2022-02-11 |
| 公開(公告)號: | CN114489515B | 公開(公告)日: | 2022-08-16 |
| 發明(設計)人: | 許文華;瞿洪桂;王思瑤;王興 | 申請(專利權)人: | 北京中電興發科技有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 北京市盛峰律師事務所 11337 | 代理人: | 席小東 |
| 地址: | 100095 北*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 基于 存儲 數據 寫入 方法 | ||
1.一種基于流存儲的數據寫入方法,其特征在于,包括以下步驟:
步驟1,磁盤組的劃分:
設共有n個磁盤,每個磁盤具有唯一的磁盤ID;將n個磁盤劃分為N個磁盤組,依次表示為:磁盤組Group0,磁盤組Group1,…,磁盤組GroupN-1;其中,每個磁盤組包括至少一個磁盤;
設磁盤組Group0包括C(0)個磁盤,表示為:磁盤disk0[0],磁盤disk1[0],…,磁盤diskC(0)-1[0];
磁盤組Group1包括C(1)個磁盤,表示為:磁盤disk0[1],磁盤disk1[1],…,磁盤diskC(1)-1[1];
依此類推
磁盤組GroupN-1包括C(N-1)個磁盤,表示為:磁盤disk0[N-1],磁盤disk1[N-1],…,磁盤diskC(N-1)-1[N-1];
步驟2,預設置輪詢時長SLT;
步驟3,接收接入設備的寫入數據請求;其中,所述寫入數據請求中攜帶有接入設備標識CID、時間戳T以及需寫入的數據內容;
其中,所述接入設備CID的生成方式為:隨機產生隨機數,并作為接入設備的接入設備標識CID;
時間戳T含義為:從預設定的時間原點T0開始,經過的時間長度;
步驟4,采用以下方法,確定本次數據寫入的磁盤組標識DGID:
步驟4.1,預設置從時間原點T0=0開始,磁盤組的輪詢順序為:按磁盤組Group0,磁盤組Group1,…,磁盤組GroupN-1的順序,依次輪詢;
步驟4.2,預設置對磁盤組的輪詢規則為:
從時間原點T0開始,在T0到SLT的時間段內,即在第1個輪詢時長內,激活磁盤組Group0,其他N-1個磁盤組為休眠狀態,在此時間段的所有設備的數據,均寫入到磁盤組Group0;
在SLT到2SLT的時間段內,即在第2個輪詢時長內,激活磁盤組Group1,其他N-1個磁盤組為休眠狀態,在此時間段的所有設備的數據,均寫入到磁盤組Group1;
依此類推,在(N-1)SLT到N*SLT的時間段內,即在第N個輪詢時長內,激活磁盤組GroupN-1,其他N-1個磁盤組為休眠狀態,在此時間段的所有設備的數據,均寫入到磁盤組GroupN-1;
至此完成對N個磁盤組的第一輪輪詢;
在N*SLT到(N+1)*SLT的時間段內,即在第N+1個輪詢時長內,激活磁盤組Group0,其他N-1個磁盤組為休眠狀態,在此時間段的所有設備的數據,均寫入到磁盤組Group0,如此開始對N個磁盤組的下一輪輪詢;
步驟4.3,采用下式,計算得到當前激活的磁盤組標識DGID:
DGID=MOD(Int(T/SLT),N)
其中:
Int()代表向下取整數;
MOD()代表取余數;
由此確定本次數據寫入的磁盤組為磁盤組GroupDGID,其中,DGID=1,2,…,N-1;磁盤組GroupDGID包括C(DGID)個磁盤;
步驟5,采用以下公式,確定磁盤組GroupDGID中選擇的磁盤標識DID:
磁盤標識DID=MOD(CID+T,C(DGID))
由此得到磁盤組GroupDGID中選擇的磁盤為:磁盤diskDID[DGID];
步驟6,在磁盤diskDID[DGID]中,采用以下方法,確定數據存儲目錄DDIR:
在磁盤diskDID[DGID]中,判斷是否已存在與接入設備CID對應的數據存儲目錄DDIR,如果存在,則直接定位到該數據存儲目錄DDIR;如果不存在,則在磁盤diskDID[DGID]中創建與接入設備CID對應的數據存儲目錄DDIR,表示為:數據存儲目錄DDIR(CID),表明該數據存儲目錄DDIR(CID),是唯一用于存儲接入設備CID上傳的數據;其中,數據存儲目錄DDIR采用接入設備CID命名;
步驟7,在數據存儲目錄DDIR(CID)內,采用以下方法,確定子目錄:
對時間戳T取整小時,表示為:整小時數時間戳T”;
在數據存儲目錄DDIR(CID)內,判斷是否存在以整小時數時間戳T”命名的子目錄IR(T”),如果存在,則直接定位到子目錄IR(T”);如果不存在,則在數據存儲目錄DDIR(CID)中,創建命名為整小時數時間戳T”的子目錄IR(T”);
具體的,對于來自于同一個接入設備CID的數據,以小時為單位進行存儲,即:同一個小時的接入設備CID的數據,存儲到同一個子目錄中,不同小時的接入設備CID的數據,存儲到不同的子目錄中;
步驟8,在子目錄IR(T”)內,采用以下方法,確定磁盤文件DFILE:
在子目錄IR(T”)內,用于存儲同一接入設備CID的元數據以及磁盤文件DFILE;其中,磁盤文件DFILE采用整小時數時間戳T”命名,即:同一個小時的接入設備CID的數據,存儲到同一個磁盤文件DFILE中,不同小時的接入設備CID的數據,存儲到不同的磁盤文件DFILE中;
因此,根據時間戳T,判斷子目錄IR(T”)中是否存在與時間戳T屬于同一個小時內的磁盤文件DFILE,如果有,則直接將接入設備CID的數據存儲到該磁盤文件DFILE;如果沒有,則在子目錄IR(T”)中創建命名為整小時數時間戳T”的磁盤文件DFILE,然后將接入設備CID的數據存儲到該磁盤文件DFILE;
至此可知,數據寫入路徑為:磁盤組GroupDGID---磁盤標識DID---數據存儲目錄DDIR--子目錄IR(T”)---磁盤文件DFILE;其中,磁盤組GroupDGID和磁盤標識DID可換算為磁盤絕對唯一標識;
由此完成數據寫入過程。
2.根據權利要求1所述的一種基于流存儲的數據寫入方法,其特征在于,還包括:
當需要讀取接入設備的數據時,根據接入設備的標識CID以及需讀取數據的時間戳T,重新計算得到讀取路徑;根據所述讀取路徑,讀取到所需數據。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京中電興發科技有限公司,未經北京中電興發科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202210129817.3/1.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





