[發明專利]一種基于云計算的氣象綜合業務系統

在審

• 申請號: 201810803314.3
• 申請日: 2018-07-20
• 公開（公告）號: CN110738453A
• 公開（公告）日: 2020-01-31
• 發明（設計）人: 方全
• 申請（專利權）人: 南京洲源信息科技有限公司
• 主分類號: G06Q10/10
• 分類號: G06Q10/10;G06Q50/26;G01W1/00
• 代理公司: 32335 南京華恒專利代理事務所(普通合伙)
• 代理人: 裴素艷

本發明提供一種基于云計算的氣象綜合業務系統，其特征在于，自頂向下將設計為應用層、服務層、數據層和基礎層，所述基礎層負責數據采集預處理以及服務器集群、網絡、存儲設備等硬件平臺的設計與部署；數據層采用HDFS、HBASE、關系數據庫混合式架構，包括大數據基礎平臺和關系型數據庫；服務層基于大數據基礎平臺，開發大數據平臺服務接口，接口主要為上層應用提供一系列數據服務；應用層主要是依托大數據平臺實現的數據查詢、數據分析以及數據挖掘等業務應用。本發明數據從獲取、入庫到共享查詢間隔不超過10秒，要素值統計分析達到秒級響應；氣象自動站報文采集及處理時間：≥2千個文件/秒；在系統設備正常運行情況下，數據整合入庫時間：≥2萬條記錄/秒。

技術領域

本發明涉及一種氣象綜合業務系統，更具體的涉及一種基于云計算的氣象綜合業務系統。

背景技術

目前我國已經建成2000多個國家級地面氣象觀測站和5萬多個區域級自動站，每5分鐘傳輸一次報文，觀測數據為分鐘級。探測技術的發展使得氣象數據具有種類多、數據量大、格式多樣復雜等特點，氣象數據包含地面、高空、海洋、農氣、雷達、衛星等14 個大類，數百個子類，既包含 txt、burf、xml 格式等結構化數據，也包含bIn、grIb-1/2、hrIt、netcdf、圖像格式等眾多非結構化數據。眾多的資料屬性信息、要素信息、站網信息和空間地理信息等組成豐富的元數據。以地面資料為主的數據傳輸時效要求越來越嚴格。探測資料種類多，應用廣泛，每年新增的氣象數據已達到PB量級，并仍在快速增長中，傳統的數據存儲、數據服務模式已明顯不能適應氣象數據激增的現狀，進而影響氣象服務的效率和質量，需要建設統一的氣象數據環境來滿足各種氣象業務應用需求。

發明內容

發明目的： 本發明目的在于針對現有技術的不足，提供一種化繁為簡、提高工作效率的基于云計算的氣象綜合業務系統。

技術方案： 本發明所述一種基于云計算的氣象綜合業務系統，自頂向下將設計為應用層、服務層、數據層和基礎層，所述基礎層負責數據采集預處理以及服務器集群、網絡、存儲設備等硬件平臺的設計與部署；數據層采用HDFS、HBASE、關系數據庫混合式架構，包括大數據基礎平臺和關系型數據庫；服務層基于大數據基礎平臺，開發大數據平臺服務接口，接口主要為上層應用提供一系列數據服務；應用層主要是依托大數據平臺實現的數據查詢、數據分析以及數據挖掘等業務應用。

本發明技術方案的進一步限定為，所述服務層接口主要包含查詢與計算兩大類，查詢類接口支持業務信息查詢檢索服務，計算類接口支持匯總分析服務。

進一步地，所述應用層主要是各級氣象業務部門的各類業務系統、需要訪問氣象數據的相關行業部門（如水利、國土等）以及未來面向社會公眾開發的數據服務等。

有益效果： 本發明提供的一種基于云計算的氣象綜合業務系統，數據從獲取、入庫到共享查詢間隔不超過10秒，要素值統計分析達到秒級響應；氣象自動站報文采集及處理時間： ≥2千個文件/秒；在系統設備正常運行情況下，數據整合入庫時間：≥2萬條記錄/秒。

具體實施方式

下面對本發明技術方案進行詳細說明，但是本發明的保護范圍不局限于所述實施例。

實施例1：一種基于云計算的氣象綜合業務系統，自頂向下將設計為應用層、服務層、數據層和基礎層，所述基礎層負責數據采集預處理以及服務器集群、網絡、存儲設備等硬件平臺的設計與部署，集群和存儲可以隨著數據量的增長線性擴充，以滿足業務增長的需要；數據層采用HDFS、HBASE、關系數據庫混合式架構，包括大數據基礎平臺和關系型數據庫，部署在基礎設施之上的大數據基礎平臺是整個架構的核心，它主要由兩部分構成，分別為分布式文件系統和分布式數據庫以及集成適合氣象數據業務需求的大數據計算和檢索引擎。服務層基于大數據基礎平臺，開發大數據平臺服務接口，接口主要為上層應用提供一系列數據服務；應用層主要是依托大數據平臺實現的數據查詢、數據分析以及數據挖掘等業務應用。