[發明專利]一種基于OSGI的分布式數據存儲方法

無效

• 申請號: 201010565271.3
• 申請日: 2010-11-25
• 公開（公告）號: CN102045389A
• 公開（公告）日: 2011-05-04
• 發明（設計）人: 易明
• 申請（專利權）人: 深圳市科陸電子科技股份有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;G06F17/30
• 代理公司: 廣州中浚雄杰知識產權代理有限責任公司 44254
• 代理人: 周永強

技術領域

本發明涉及一種基于OSGI的分布式數據存儲方法，尤指以JAVA中OSGI為技術手段實現海量數據分布式存儲的方法。

背景技術

隨著技術的不斷發展，數據存儲需求增大，系統不但要求能快速讀寫數據，同時要求系統不但能保證數據安全、數據完整，同時要保證系統能在數年內不間斷運行，這樣必須要求系統有很高的動態性，能夠在運行狀態完成系統模塊安裝、卸載、更新操作。傳統的開發模式很難勝任動態的修改和改變系統的行為，同時傳統的數據讀寫方式，由于磁盤IO瓶勁，在海量數據的情況下很難保證數據安全、數據完整及快速讀取。

發明內容

本發明要解決的技術問題在于，針對現有技術的上述不能動態安裝、卸載、啟動和停止程序，海量數據讀取效率低，同時難以保證數據安全及完整，提供一種程序高動態性，海量數據讀取效率高、數據安全、完整的數據分布式存儲的方法。

為實現上述目的，本發明的技術方案是：一種基于OSGI的分布式數據存儲方法，其特征在于，包括二大步驟：

步驟一：

A)客戶端生成數據；

B)Socket發送數據；

C)服務端序列化數據唯一ID；

D)服務端將數據存儲到本地磁盤；

E)服務端將數據通過SOCKET發送到節點服務端數據存儲節點；

F)節點服務端存儲數據到節點磁盤；

步驟二：

G)客戶端讀取數據；

H)Socket發送讀取請求；

I)服務端根據數據ID數量及當前運行節點服務端數量生成數據讀取方案；

J)服務端根據方案從本地磁盤和節點磁盤并發讀取數據；

K)服務端收集所有數據將數據列表返回給客戶端。

作為具體化，所述服務端和節點服務端部署在OSGI容器中；并且所述方法的代碼開發遵循OSGI規范。

作為具體化，在所述步驟一A)中：客戶端生成的數據為普通JAVA對象；并且客戶端生成數據時同時生成數據唯一ID。

作為具體化，在所述步驟一B)中：客戶端通過Socket將數據唯一ID和數據對象發送到主服務端。

作為具體化，在所述步驟一C)中：服務端使用長整型數據類型自增長出全局數據唯一ID。

作為改進，所述步驟一D)還包括如下步驟：

D1)服務端將數據ID和數據對象存儲到本地磁盤中；

D2)服務端存儲數據時會生成索引文件和數據文件，索引文件存儲數據ID、數據在數據文件對應的位置、全局數據唯一ID。

作為改進，在所述步驟一E)中，由1個主服務端和N個節點服務端完成，其中N≥1；并且步驟一E)分為：

E1)節點服務端啟動后主動發送登陸信息到主服務端；

E2)主服務端將數據分發到各節點服務端。

作為改進，所述步驟一F)還包括如下步驟：

F1)節點服務端將數據ID和數據對象存儲到磁盤中；

F2)節點服務端存儲數據時會生成索引文件和數據文件，索引文件存儲數據ID、數據在數據文件對應的位置、全局數據唯一ID。

作為具體化，在所述步驟二G)中：客戶端讀取數據根據所述步驟一A)中生成的數據唯一ID進行讀取。

作為改進，所述步驟二I)還包括如下步驟：

I1)客戶端請求大量數據時服務端生成數據讀取方案從其它節點服務端并發讀取數據。

作為改進，所述服務端和所述節點服務端運行在OSGI容器下，服務端和節點服務端都在不重啟的情況時動態更新，重啟后服務端和各節點服務端數據保持一致。

作為改進，所述節點服務端根據硬件服務器或數據量自由增加。

作為改進，節點服務端啟動后根據全局數據唯一ID從主服務端或其它節點服務端同步數據，保持所有服務端數據一致。

由于采用OSGI框架開發及部署，使用OSGI規范編寫程序，使用OSGI容器運行程序，并在OSGI環境下可動態地安裝、卸載、啟動和停止程序各節點；此外，服務端和節點服務端分布存儲數據，節點服務端可動態增加，節點服務端重啟后從其它服務端同步數據；而服務端和節點服務端可并發讀取數據，并發讀取數據時服務端自動根據讀取數量動態分配到其它節點服務端并發讀取。因此，該基于OSGI的分布式數據存儲方法使程序能夠動態地安裝、卸載、啟動和停止，同時數據安全性和完整性很高，數據讀取快速。

附圖說明

圖1是基于OSGI的分布式存儲系統結構示意圖；

圖2是數據存儲流程圖；

圖3是數據讀取流程圖；

圖4是數據同步流程圖。

具體實施方式