[發明專利]一種校園網格數據傳輸服務中數據索引方法

有效

• 申請號: 200810243422.6
• 申請日: 2008-12-17
• 公開（公告）號: CN101442496A
• 公開（公告）日: 2009-05-27
• 發明（設計）人: 王汝傳;徐沖;季一木;任勛益;鄧松;季一木;易侃;楊明慧;付雄
• 申請（專利權）人: 南京郵電大學
• 主分類號: H04L12/56
• 分類號: H04L12/56;H04L12/28
• 代理公司: 南京經緯專利商標代理有限公司
• 代理人: 葉連生

技術領域

本發明是一種基于網格的校園數據傳輸服務中數據的索引方案。通過在Globus?Toolkit(Globus提供的工具包)提供的MDS(監控與發現系統)和GridFTP(基于網格的數據傳輸協議)兩個組件基礎上增加了索引服務，實現了Web用戶方便的獲得MDS所發現的數據資源列表，主要用于解決大規模網格數據傳輸時數據查詢，屬于計算機網絡技術領域。

背景技術

校園數據傳輸服務中的GridFTP服務數量眾多，使用頻繁，成為承載校園文化的重要平臺，當前，現有校園GridFTP服務在數據查詢上存在兩個主要問題：①資源信息定位難：用戶得不到第三方工具進行資源定位。②數據信息描述不充分：導致資源定位更加困難，同時難以避免不必要的數據冗余。這些問題的根源在于Globus提供的MDS是基于Web?Service的服務，而GridFTP是非Web?Service的服務，且Globus所提出的網格安全架構GSI(Grid?SecurityInfrastructure)目前只支持Linux操作系統，極大的限制了網格跨平臺的特性。為此，在校園GridFTP服務中提出了一種索引機制，方便數據的查詢。

發明內容

技術問題：本發明的目的是提供一種校園網格數據傳輸服務中數據的索引方法，來解決原有校園GridFTP內資源共享不方便，減少數據冗余，與過去使用的GridFTP服務不同，本方法是一種基于索引的數據傳輸機制，通過使用本發明提出的方案可以達到快速發現校園GridFTP內資源，提高資源共享，以及數據高速傳輸的目的。

技術方案：本發明試圖通過為GridFTP服務中的數據傳輸建立索引機制，方便數據的高效傳輸，讓校園GridFTP服務為我們提供一個資源共享的大平臺，成為校內信息傳播的重要途徑。

本發明是一種校園網格GridFTP服務中數據的索引方法，任何獲得網格安全信任的數據提供者都可以方便的獲得或退出網格GridFTP服務，同時又充分的兼容現有的GridFTP服務器程序及數據，我們所要做的只是在Globus的GridFTP基礎上添加一個能提供網格服務接口的索引中間件，

本發明校園網格數據傳輸服務中數據的索引方法所包含的步驟為：

步驟1)在網格環境中配置外部信息提供者，并將他們與網格自帶的監控器-資源監控與發現系統集成，將監控所需的環境配置完成；

步驟2)數據采集者按照固定周期輪詢T采集網格環境下的各個節點的主機名、處理器速度、內存使用情況、文件系統大小及使用情況等性能數據信息；

步驟3)將采集到的性能數據定時匯總到目錄服務中，并以圖形化的形式展現給用戶，方便用戶選擇相應的節點處理數據，并將該時刻得到的數據保存在智能監控器中；

步驟4)索引服務器與基于網格的數據傳輸服務器的會話協議：在索引服務器中建立數據描述表，該表中登記了網格數據傳輸站點，協議要完成把索引服務中的數據資源，索引到基于網格的數據傳輸站點中去，并且寫入數據傳輸日志，記錄其傳輸任務編號，數據發送者標識相關信息；協議還要完成索引服務器與索引服務器之間的會話，需要解決在什么時間內有效，確定有效性的間隔時間與網絡負載之間的平衡，要取得間隔時間短，但網絡開銷不大的平衡點，包括索引服務器列表信息、索引服務器狀態信息、響應時間；

步驟5)用戶通過客戶端登陸網格門戶，查看各個節點的資源狀態信息、各個節點計算處理能力，將需要的共享傳輸的資源發布出去，過時的資源刪除，實現資源的動態的加入離開校園網格這個虛擬組織；

步驟6)用戶通過索引資源列表，還可以以獲得信任的第三方身份控制網格節點中的數據傳輸，就是調用節點中打包好的網格服務，控制節點間的數據傳輸；

步驟7)此時用戶再刷新下索引服務列表，如果資源已被預先期望的節點共享，則一個網格索引服務生命周期結束。

如圖1所示，下面給出校園網格數據傳輸服務中索引方法的具體實現方案。

一、體系結構

一個運用這種方法的索引體系結構，它的功能部件主要包括數據傳輸日志，MDS監控器，索引服務器。三者關系如圖2所示，

下面我們給出幾個具體部分的說明：

數據傳輸日志：為了提高基于網格服務進行數據傳輸的可靠性，本發明引入了數據傳輸日志機制。對于一個運行著數據傳輸任務，由以一個或多個傳輸子任務組成。在傳輸日志中有兩個部分與之對應。一部分是傳輸任務項，另一部分是傳輸子任務項。傳輸任務項標識了整個傳輸任務，傳輸子任務項標識了一個傳輸子任務。傳輸任務項含以下幾個部分：