[發明專利]數據采集方法、裝置、設備及存儲介質

有效

• 申請號: 202110281104.4
• 申請日: 2021-03-16
• 公開（公告）號: CN112948216B
• 公開（公告）日: 2023-01-06
• 發明（設計）人: 陳鍵冬;李旦
• 申請（專利權）人: 廣州虎牙科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本發明實施例公開了一種數據采集方法、裝置、設備及存儲介質。該方法包括：在進程運行過程中，如果接收到超文本傳輸協議HTTP服務請求，則確定與所述HTTP服務請求對應的待采集數據類型；如果本地緩存中存在與所述待采集數據類型匹配的有效數據，則將所述有效數據作為目標數據返回；如果本地緩存中不存在與所述待采集數據類型匹配的有效數據，則觸發與所述待采集數據類型匹配的數據采集開關進行數據采集，并將采集的數據作為目標數據返回。本發明實施例的技術方案，實現了按需啟動數據采集操作，減小額外的性能開銷。

技術領域

本發明實施例涉及計算機技術領域，尤其涉及一種數據采集方法、裝置、設備及存儲介質。

背景技術

目前，應用進程運行時會進行進程內部調度和線程切換管理，運行過程中會將一些重要的統計數據記錄下來，便于開發人員調試和分析，比如垃圾回收(GarbageCollection，GC)的時間，堆棧分配的內存等等。大多數編程語言都會提供一個運行時統計數據的采集函數，調用該函數將返回當前時刻的運行時狀態，但是該函數的調用會有一定的性能開銷，對于高并發要求的程序會有影響。

現有技術中，大多數的統計數據采集方案都是在進程啟動時就將狀態采集操作開啟，性能開銷較大。并且大多不會對采集的數據進行可視化，開發人員只能登陸服務器逐個去執行命令查看數據，很難有一個直觀的效果觀察數據的變化趨勢。

發明內容

本發明實施例提供一種數據采集方法、裝置、設備及存儲介質，以實現按需啟動數據采集操作，減小額外的性能開銷。

第一方面，本發明實施例提供了一種數據采集方法，包括：

在進程運行過程中，如果接收到超文本傳輸協議(HyperText TransferProtocol，HTTP)服務請求，則確定與HTTP服務請求對應的待采集數據類型；

如果本地緩存中存在與待采集數據類型匹配的有效數據，則將有效數據作為目標數據返回；

如果本地緩存中不存在與待采集數據類型匹配的有效數據，則觸發與待采集數據類型匹配的數據采集開關進行數據采集，并將采集的數據作為目標數據返回。

可選的，還包括：

預先針對各種待采集數據類型分別設置獨立的數據采集開關以及HTTP接口；

其中，數據采集開關用于控制開啟和關閉與待采集數據類型對應的數據采集操作，HTTP接口用于返回數據。

可選的，數據采集開關僅在接收到對應的HTTP服務請求時才被觸發開啟數據采集操作，在通過HTTP接口返回數據后被觸發關閉數據采集操作。

可選的，預先針對各種待采集數據類型分別設置獨立的數據采集開關以及HTTP接口，包括：

獲取各待采集數據類型對應的數據采集函數，并為各數據采集函數分別設置對應的數據采集開關以及HTTP接口。

可選的，預先針對各種待采集數據類型分別設置采集周期參數；

如果本地緩存中存在與待采集數據類型匹配的有效數據，則將有效數據作為目標數據返回，包括：

如果在本地緩存中查詢到與待采集數據類型匹配的目標緩存數據，并且目標緩存數據的采集時間與當前時間的差值不超過與待采集數據類型匹配的采集周期，則將目標緩存數據為目標數據返回。

可選的，如果本地緩存中不存在與待采集數據類型匹配的有效數據，則觸發與待采集數據類型匹配的數據采集開關進行數據采集，包括：

如果在本地緩存中未查詢到與待采集數據類型匹配的目標緩存數據，或者，從本地緩存中獲取到的目標緩存數據的采集時間與當前時間的差值超過與待采集數據類型匹配的采集周期，則觸發與待采集數據類型匹配的數據采集開關進行數據采集，并將采集的數據更新到本地緩存中。