[發明專利]數據采集方法、電子設備和計算機可讀存儲介質

在審

• 申請號: 202010170481.6
• 申請日: 2020-03-12
• 公開（公告）號: CN111475555A
• 公開（公告）日: 2020-07-31
• 發明（設計）人: 陳堯;桂祖宏
• 申請（專利權）人: 咪咕文化科技有限公司;中國移動通信集團有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/27
• 代理公司: 上海晨皓知識產權代理事務所(普通合伙) 31260
• 代理人: 成麗杰

1.一種數據采集方法，其特征在于，應用于采集配置客戶端，所述采集配置客戶端預置有采集端中各采集實例的標識信息和用于對所述采集實例進行操作的操作指令，所述方法包括：

獲取用戶選擇的標識信息和操作指令；

將所述用戶選擇的標識信息和操作指令發送至所述采集端，供所述采集端確定所述用戶選擇的標識信息對應的采集實例，并對確定的采集實例執行所述用戶選擇的操作指令。

2.根據權利要求1所述的數據采集方法，其特征在于，所述將所述用戶選擇的標識信息和操作指令發送至所述采集端，包括：

采用預設的編碼模式對所述用戶選擇的標識信息和操作指令進行編碼，得到編碼后的數據；其中，所述預設的編碼模式為Action://+Message，所述Action為所述用戶選擇的操作指令，所述Message包括所述用戶選擇的標識信息；

將所述編碼后的數據發送給所述采集端，供所述采集端對所述編碼后的數據進行解碼后確定所述用戶選擇的標識信息對應的采集實例，并對確定的采集實例執行所述用戶選擇的操作指令。

3.根據權利要求2所述的數據采集方法，其特征在于，若所述用戶選擇的操作指令為配置采集實例，則在所述獲取用戶選擇的標識信息和操作指令之后，還包括：

獲取采集配置信息；

所述采用預設的編碼模式對所述用戶選擇的標識信息和操作指令進行編碼，得到編碼后的數據，包括：

采用預設的編碼模式對所述采集配置信息、所述用戶選擇的標識信息和操作指令進行編碼，得到編碼后的數據；其中，所述預設的編碼模式中的所述Message還包括所述采集配置信息，所述采集配置信息用于供所述采集端生成采集配置文件以完成對所述用戶選擇的標識信息對應的采集實例的配置。

4.根據權利要求3所述的數據采集方法，其特征在于，所述獲取采集配置信息，包括：

獲取大數據集群的集群特征和所述采集端的采集特征；其中，所述大數據集群用于寫入采集的數據；所述集群特征用于表征所述大數據集群的繁忙程度，所述采集特征用于表征所述采集端的采集進度；

根據所述集群特征、所述采集特征以及預先訓練的采集配置模型，獲取采集配置信息。

5.一種數據采集方法，其特征在于，應用于采集端，所述采集端中預置有各采集實例與各標識信息的對應關系，所述方法包括：

接收采集配置客戶端發送的用戶選擇的標識信息和操作指令；其中，所述采集配置客戶端預置有所述采集端中各采集實例的標識信息和用于對所述各采集實例進行操作的各操作指令；

根據所述對應關系，確定所述用戶選擇的標識信息對應的采集實例；

對確定的采集實例執行所述用戶選擇的操作指令。

6.根據權利要求5所述的數據采集方法，其特征在于，若所述操作指令為配置采集實例，則所述對確定的采集實例執行所述用戶選擇的操作指令，包括：

獲取采集配置信息；

基于所述采集配置信息和預設的配置模板，通過渲染生成采集配置文件；

根據所述采集配置文件，對所述確定的采集實例進行配置，并基于配置后的采集實例進行數據采集。

7.根據權利要求5所述的數據采集方法，其特征在于，在所述對確定的采集實例執行所述用戶選擇的操作指令之后，還包括：

獲取大數據集群的集群特征和所述采集端的采集特征；其中，所述大數據集群用于寫入采集的數據；所述集群特征用于表征所述大數據集群的繁忙程度，所述采集特征用于表征所述采集端的采集進度；

根據所述集群特征和所述采集特征，對數據采集的采集策略進行調整；

根據調整后的采集策略，進行數據采集。

8.根據權利要求7所述的數據采集方法，其特征在于，所述根據所述集群特征和所述采集特征，對進行數據采集時的采集策略進行調整，包括：

根據所述集群特征和所述采集特征，對數據采集的采集速率和采集頻率進行調整；和/或；

根據所述集群特征和所述采集特征，調整運行的采集實例的個數。