[發明專利]MRS集群外的電力大數據分析平臺搭建方法及裝置

在審

• 申請號: 202210024513.0
• 申請日: 2022-01-11
• 公開（公告）號: CN114546422A
• 公開（公告）日: 2022-05-27
• 發明（設計）人: 歐陽文華;蒙天騏;蔡木良;安義;徐在德;戚沁雅;陳琛;劉蓓
• 申請（專利權）人: 國網江西省電力有限公司電力科學研究院;國家電網有限公司
• 主分類號: G06F8/61
• 分類號: G06F8/61;G06F8/76;G06F9/455
• 代理公司: 南昌賢達專利代理事務所(普通合伙) 36136
• 代理人: 金一嫻

本發明公開一種MRS集群外的電力大數據分析平臺搭建方法及裝置，方法包括：根據MRS集群所部署的云環境，對電力大數據分析平臺進行基礎環境準備；將電力大數據分析平臺時間與Master節點時間進行同步；在集群外節點安裝MRS集群客戶端，在管理控制臺創建集群用戶并授予相應權限，授權用戶在電力大數據分析平臺登錄客戶端進行相互身份驗證；分析平臺節點環境配置和開發環境部署，集成開發環境的安裝部署。采用該方法搭建的分析平臺是通用的、可復制的，并且可以用Docker容器打包成鏡像直接在其他集群外節點使用，開發人員通過該方法能夠快速實現數據中臺所有資源訪問能力，無需進行繁瑣的環境部署，降低學習、開發成本。

技術領域

本發明屬于電力技術領域，尤其涉及一種MRS集群外的電力大數據分析平臺搭建方法及裝置。

背景技術

電力大數據是國家電網有限公司搶抓數字新基建機遇，推動電網數字化轉型的重要手段。公司及各省電力公司均已建成數據中臺，數據中臺幾乎匯集了公司內包括設備、運行、人資等各領域的所有數據并搭建了MRS集群。電網數據的管理模式為統一管理、按需申請，即公司統一存儲、運維中臺數據，各分公司按照各自需要向數據中臺管理部門申請訪問相應的數據表。

數據中臺運維管理部門只負責存儲、運維、管理數據，即當數據使用人員提出訪問申請時，向用戶賦予相應表的訪問權限，不負責使用人員的數據接入、數據表訪問、數據開發環境部署工作；另一方面，由于數據中臺的數據存儲結構復雜，既有存儲在傳統關系型數據庫PostgresSql中的數據，又有存儲在Hadoop分布式文件系統HDFS(Hadoop DistributedFile System)中的數據，且各基層單位訪問均處在數據中臺的大數據集群外，需要在集群外部署服務客戶端、配置環境、身份認證、數據開發困難重重，這也是制約基層單位開展大數據分析的工作的主要困難。

發明內容

本發明提供一種MRS集群外的電力大數據分析平臺搭建方法及裝置，用于至少解決上述技術問題之一。

第一方面，本發明提供一種MRS集群外的電力大數據分析平臺搭建方法，包括：根據MRS集群所部署的云環境，對電力大數據分析平臺進行基礎環境準備，所述基礎環境準備包括操作系統的鏡像選擇與安裝、開發運行基本環境配置以及組件安裝工具配置；將電力大數據分析平臺時間與Master節點時間進行同步，所述同步包括根據命令yum-y installntp完成電力大數據分析平臺ntp服務的安裝；根據命令vi/etc/ntp.conf修改ntp.conf文件中server xx.xx.xx.xx prefer，將server指向主節點，其中xx.xx.xx.xx為Mater節點時間同步服務器的IP地址；根據命令service ntpd start啟動ntp服務，完成分析平臺與主節點的時間同步，根據ntpstat查看時間同步狀態，確認時間同步成功；在集群外節點安裝MRS集群客戶端，在管理控制臺創建集群用戶并授予相應權限，授權用戶在電力大數據分析平臺登錄客戶端進行相互身份驗證；分析平臺節點環境配置和開發環境部署，集成開發環境的安裝部署。