[發(fā)明專利]面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法及其裝置

有效

• 申請?zhí)枺?/td>: 202111190600.5
• 申請日: 2021-10-13
• 公開（公告）號: CN113641765B
• 公開（公告）日: 2022-02-18
• 發(fā)明（設(shè)計(jì)）人: 杜震洪;孫逍遙;汪愿愿;吳森森;陳奕君;王立君;張豐;劉仁義
• 申請（專利權(quán)）人: 浙江大學(xué)
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/21
• 代理公司: 杭州求是專利事務(wù)所有限公司 33200
• 代理人: 傅朝棟;張法高

1.一種面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法，其特征在于，包括：

S1、將多個(gè)存儲多源遙感數(shù)據(jù)的數(shù)據(jù)中心按照無中心節(jié)點(diǎn)的星型拓?fù)浣Y(jié)構(gòu)建立分布式存儲網(wǎng)絡(luò)，且任意數(shù)據(jù)中心均能夠向分布式存儲網(wǎng)絡(luò)的在線數(shù)據(jù)中心注冊自己的遙感元數(shù)據(jù)；所有在線數(shù)據(jù)中心均實(shí)時(shí)監(jiān)聽各自元數(shù)據(jù)表的變化；

S2、針對所有待上傳至數(shù)據(jù)中心的每一種遙感元數(shù)據(jù)類型各自建立一個(gè)元數(shù)據(jù)映射模板，用于將該遙感元數(shù)據(jù)類型中的屬性字段一一對應(yīng)映射至遙感元數(shù)據(jù)核心編目集中的屬性字段；所述遙感元數(shù)據(jù)核心編目集為統(tǒng)一的屬性目錄體系，且其中的屬性字段覆蓋遙感元數(shù)據(jù)的所有屬性字段；

S3、需注冊遙感元數(shù)據(jù)的數(shù)據(jù)中心向分布式存儲網(wǎng)絡(luò)中任一在線數(shù)據(jù)中心發(fā)送注冊請求，在線數(shù)據(jù)中心收到注冊請求后調(diào)用待注冊的遙感元數(shù)據(jù)類型對應(yīng)的元數(shù)據(jù)映射模板，將從待注冊的遙感元數(shù)據(jù)中解析得到的所有屬性值按照元數(shù)據(jù)映射模板中的屬性字段映射關(guān)系入庫至在線數(shù)據(jù)中心內(nèi)符合遙感元數(shù)據(jù)核心編目集統(tǒng)一格式的元數(shù)據(jù)表中，完成遙感元數(shù)據(jù)的注冊；

S4、當(dāng)任一在線數(shù)據(jù)中心監(jiān)聽到的元數(shù)據(jù)表發(fā)生變化時(shí)，通過遙感元數(shù)據(jù)同步服務(wù)將該在線數(shù)據(jù)中心中變化的元數(shù)據(jù)記錄到臨時(shí)表中，然后基于訂閱分發(fā)機(jī)制向每一個(gè)其他的在線數(shù)據(jù)中心同步該臨時(shí)表中記錄的變化元數(shù)據(jù)，實(shí)現(xiàn)分布式存儲網(wǎng)絡(luò)中遙感元數(shù)據(jù)的全局統(tǒng)一組織和共享。

2.如權(quán)利要求1所述的面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法，其特征在于，所述分布式存儲網(wǎng)絡(luò)中，遙感數(shù)據(jù)的元數(shù)據(jù)在所有在線數(shù)據(jù)中心之間全局統(tǒng)一組織和共享，而遙感數(shù)據(jù)文件則分散存儲于各數(shù)據(jù)中心上。

3.如權(quán)利要求1所述的面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法，其特征在于，所述遙感元數(shù)據(jù)核心編目集中包含了所有遙感元數(shù)據(jù)標(biāo)準(zhǔn)屬性字段，且該遙感元數(shù)據(jù)核心編目集保持不斷更新，如果出現(xiàn)新的遙感元數(shù)據(jù)屬性字段則對目錄進(jìn)行擴(kuò)充以納入新的屬性字段。

4.如權(quán)利要求1所述的面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法，其特征在于，所述遙感元數(shù)據(jù)為XML文件，元數(shù)據(jù)映射模板中設(shè)置了XML中每一條包含元數(shù)據(jù)的XPath路徑與遙感元數(shù)據(jù)核心編目集中屬性字段之間的映射關(guān)系。

5.如權(quán)利要求4所述的面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法，其特征在于，所述元數(shù)據(jù)映射模板中，如果XPath路徑中存儲的屬性值屬于數(shù)組，則應(yīng)添加數(shù)組標(biāo)記以標(biāo)記對應(yīng)的屬性字段在數(shù)組中的位置，映射時(shí)需要解析數(shù)組標(biāo)記從而將數(shù)組中的各屬性值按其所在位置入庫。

6.如權(quán)利要求4所述的面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法，其特征在于，新建的元數(shù)據(jù)映射模板在實(shí)際應(yīng)用前，應(yīng)當(dāng)進(jìn)行解析驗(yàn)證，步驟如下：

首先，從元數(shù)據(jù)映射模板的根節(jié)點(diǎn)開始，循環(huán)迭代得到模板內(nèi)所有葉節(jié)點(diǎn)的XPath路徑以及遙感元數(shù)據(jù)核心編目集中映射關(guān)系對應(yīng)的屬性字段，解析遙感元數(shù)據(jù)XML文件每個(gè)葉節(jié)點(diǎn)中的屬性值并按照映射關(guān)系入庫到遙感元數(shù)據(jù)核心編目集中的屬性字段節(jié)點(diǎn)；

然后，檢查入庫的遙感元數(shù)據(jù)格式是否正確，若有誤則重新修改元數(shù)據(jù)映射模板并重新進(jìn)行解析入庫，確認(rèn)無誤后正式生效該新建的元數(shù)據(jù)映射模板并保持不可修改。

7.如權(quán)利要求1所述的面向巨量多源遙感數(shù)據(jù)的統(tǒng)一邏輯模型組織方法，其特征在于，每個(gè)數(shù)據(jù)中心上均部署有用于實(shí)現(xiàn)遙感元數(shù)據(jù)同步服務(wù)的數(shù)據(jù)捕獲引擎、數(shù)據(jù)傳輸模塊以及數(shù)據(jù)同步引擎；

所述數(shù)據(jù)捕獲引擎，用于通過監(jiān)聽器監(jiān)聽數(shù)據(jù)中心本地的元數(shù)據(jù)表變化，當(dāng)元數(shù)據(jù)更新時(shí)將變化的元數(shù)據(jù)記錄到臨時(shí)表中，再按照數(shù)據(jù)交換標(biāo)準(zhǔn)打成數(shù)據(jù)包；

所述數(shù)據(jù)傳輸模塊，用于將本地的數(shù)據(jù)捕獲引擎生成的所述數(shù)據(jù)包發(fā)送給分布式存儲網(wǎng)絡(luò)中其他的數(shù)據(jù)中心，同時(shí)也接收由其他數(shù)據(jù)中心發(fā)送的所述數(shù)據(jù)包；

所述數(shù)據(jù)同步引擎，用于對接收到的由其他數(shù)據(jù)中心發(fā)送的所述數(shù)據(jù)包進(jìn)行解析，從中提取變化的元數(shù)據(jù)并同步更新至本地的元數(shù)據(jù)表中。