[發(fā)明專利]ETCD數據的線上處理方法、裝置、設備以及存儲介質

在審

• 申請?zhí)枺?/td>: 202110310806.0
• 申請日: 2021-03-23
• 公開（公告）號: CN113761399A
• 公開（公告）日: 2021-12-07
• 發(fā)明（設計）人: 楊軒嘉;郭偉;石慧興;趙晨;劉巖
• 申請（專利權）人: 北京沃東天駿信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/9538
• 分類號: G06F16/9538;G06F16/957;G06F9/50;G06F11/30;G06F11/32
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 張娜;黃健

本發(fā)明提供一種ETCD數據的線上處理方法、裝置、設備以及存儲介質，接收到瀏覽器發(fā)送的查詢請求時，ETCD通過運行時的代碼庫，運行pprof命令導出內存中的堆棧數據，并在ETCD中將該堆棧數據生成圖片報告的形式再進行編碼，得到二進制數據流，將該二進制數據流返回瀏覽器進行展示，可以通過瀏覽器發(fā)送請求實時進行查詢和圖片報告的展示，方便用戶快速的對性能和穩(wěn)定性等問題進行排查，獲取到內存使用的情況。

技術領域

本發(fā)明涉及計算機領域，尤其涉及一種ETCD數據的線上處理方法、裝置、設備以及存儲介質。

背景技術

ETCD是一個分布式的、高可用的、一致的key-value存儲數據庫，基于Go語言實現(xiàn)，主要用于共享配置和服務發(fā)現(xiàn)。為了防止單點故障，還可啟動多個ETCD組成集群。ETCD集群使用raft一致性算法處理日志復制，保證多節(jié)點數據的強一致性。

目前，ETCD提供啟動時設置—enable-pprof參數，這樣就可以使用go pprof命令行獲取備份(dump)出來堆棧信息，然后可以通過命令go tool pprof–svg把dump的堆棧信息轉換成堆棧調用圖，然后再把svg格式的堆棧調用圖下載到本地進行查看分析，從而排查ETCD集群中存在的問題。由于安全部對線上服務器的一些命令限制，有時候把svg格式的堆棧調用圖下載到本地也無法實現(xiàn)，這對線上性能和穩(wěn)定性問題的排查造成更大的難度。

綜上所述，針對ETCD中存在的問題的定位和排查，或者對內存的使用情況等，還沒有能夠在線上實現(xiàn)的技術方案。

發(fā)明內容

本發(fā)明實施例提供一種ETCD數據的線上處理方法、裝置、設備以及存儲介質，提供一種針對ETCD的線上查詢方法，可對存在的問題進行線上快速定位和排查，對內存的使用情況進行線上查詢。

第一方面，本發(fā)明實施例提供一種ETCD數據的線上處理方法所述方法包括：

接收瀏覽器發(fā)送的查詢請求，所述查詢請求用于請求當前時刻ETCD的內存使用情況；

根據所述查詢請求，運行pprof命令導出內存的堆棧數據；

根據所述堆棧數據生成圖片報告；

將所述圖片報告進行編碼生成二進制數據流，并將所述二進制數據流返回所述瀏覽器。

在一種具體的實現(xiàn)方式中，所述查詢請求中包括數據類型；

相應的，所述根據所述查詢請求，運行pprof命令導出內存的堆棧數據，包括：

根據所述查詢請求，運行pprof命令導出內存中與所述數據類型對應的所述堆棧數據。

在一種具體的實現(xiàn)方式中，所述根據所述查詢請求，運行pprof命令導出內存中與所述數據類型對應的所述堆棧數據，包括：

根據所述數據類型以及預先獲取的類型與請求接口之間的對應關系，獲取與所述數據類型對應的請求接口；

根據所述查詢請求，運行pprof命令通過所述數據類型對應的請求接口導出所述堆棧數據。

在一種具體的實現(xiàn)方式中，所述將所述圖片報告進行編碼生成二進制數據流之前，所述方法還包括：

生成與本次查詢對應的數據編號；

建立所述數據編號與所述圖片報告之間的映射關系。

在一種具體的實現(xiàn)方式中，所述數據類型包括CPU數據，內存數據，線程數據，鎖數據中的至少一種。

在一種具體的實現(xiàn)方式中，所述圖片報告包括火焰圖，堆棧調用圖以及文字報告中的任一種。

第二方面，本發(fā)明實施例提供一種ETCD數據的線上處理裝置，包括：