[發明專利]一種面向業務場景的油氣大數據分析系統及方法

有效

• 申請號: 202110942720.X
• 申請日: 2021-08-17
• 公開（公告）號: CN113656021B
• 公開（公告）日: 2023-08-25
• 發明（設計）人: 李艷春;文必龍;高俊濤;王志寶
• 申請（專利權）人: 東北石油大學
• 主分類號: G06F8/34
• 分類號: G06F8/34;G06F8/36;G06F16/21;G06Q50/02
• 代理公司: 大連東方專利代理有限責任公司 21212
• 代理人: 王洪生;李洪福

1.一種面向業務場景的油氣大數據分析系統，其特征在于，包括：

分析模塊管理引擎，所述分析模塊管理引擎在油氣勘探和開發過程中將典型業務場景對應的數據處理算法、模型開發或封裝成的可復用的組件；

業務流程可視化編輯引擎，所述業務流程可視化編輯引擎提供可視化的油氣大數據分析業務流程設計工具，所述業務流程可視化編輯引擎定義一套可視化流程描述的語法、語義以及圖形關系；

分析流程轉換引擎，所述分析流程轉換引擎接收用戶通過所述業務流程可視化編輯引擎設計完成的業務流程，解析流程使用的分析模塊，并依據模型轉換算法將面向領域的業務流程轉換成面向平臺的大數據分析可執行流程；

流程執行優化引擎，所述流程執行優化引擎接收所述分析流程轉換引擎提交的待執行分析流程實例，根據待執行分析流程應用的數據規模和平臺運行狀態獲得最優運行配置參數；

分布式流程執行調度引擎，所述分布式流程執行調度引擎控制已發布分析流程應用的執行；

大數據庫，所述大數據庫包括數據資源庫和分析模塊庫，所述數據資源庫收集和存儲油氣大數據，所述分析模塊庫管理分析模塊執行實體，數據被收集或分析模塊被提交后發送到分布式文件系統中數據節點進行存儲。

2.根據權利要求1所述的面向業務場景的油氣大數據分析系統，其特征在于：所述分布式流程執行調度引擎包括執行模塊、監測模塊和結果展示模塊，所述執行模塊為分析模塊計算提供計算資源，所述監測模塊進行定時和定期的分析任務運行狀態監控，并監測數據服務器平臺的整體運行情況。

3.一種面向業務場景的油氣大數據分析方法，其特征在于，所述分析方法應用于如權利要求1～2任一項所述的面向業務場景的油氣大數據分析系統，所述方法包括：

所述大數據庫管理待分析處理業務的數據源；

所述分析模塊管理引擎為所述業務流程編輯引擎提供可選的功能性分析模塊列項，可選的分析模塊被業務分析提出者根據需求選取或補充設計，得到解決領域業務場景的一組分析模塊；

所述業務流程可視化編輯引擎提供可視化的油氣大數據分析業務流程設計環境，業務分析提出者根據特定場景需求的業務交互與組合關系，排列和組合各種功能性分析模塊，在中完成業務流程設計；

所述業務流程可視化編輯引擎，在業務分析提出者創建業務流程完成后，驗證業務流程的合法性，驗證通過，則并將業務流程描述發送至所述業務流程轉換引擎；

所述分析流程轉換引擎在分析流程發布后，自動通過基于分析模塊及模型驅動的模型轉換算法實現流程模型之間的轉換，將面向領域的大數據分析業務流程轉換為面向平臺的大數據分析可執行流程實例；

所述流程執行優化引擎根據大數據分析可執行流程實例的數據規模獲得的執行平臺最優配置參數，并與流程模型描述文件、分析模塊對應任務的可執行代碼和參數配置一起打成部署包，將部署包自動推送到分析流程執行引擎執行；

所述分析流程執行引擎接收具體數據處理流程實例實現部署執行，實現定時和定期分析任務運行狀態、耗時等指標的監控，并在流程計算完成后返回分析結果。

4.根據權利要求3所述的面向業務場景的油氣大數據分析方法，其特征在于，建立分析流程轉換引擎定義，提供領域業務驅動的大數據分析流程處理框架包括如下步驟：

定義面向領域業務和面向平臺的大數據流程元模型；

采用基于模型驅動的模型轉換技術，建立面向領域業務和面向平臺的大數據流程模型映射規則；

根據所述映射規則，建立從面向領域業務到面向平臺的大數據流程轉換算法；

轉換算法采用自上而下目標分解流程中各節點對應的分析模塊的生成可執行流程實例。

5.根據權利要求3所述的面向業務場景的油氣大數據分析方法，其特征在于，建立流程執行引擎定義，提供分析流程執行引擎最優運行配置參數包括：

建立分布式執行平臺應用執行時間的性能模型；

基于性能模型，采用遺傳算法進行分布式執行平臺配置參數尋優，實現從高維配置參數空間自動搜索最佳配置參數。