[發明專利]基于Nginx的數據收集系統及方法

有效

• 申請號: 201811379664.8
• 申請日: 2018-11-20
• 公開（公告）號: CN109861958B
• 公開（公告）日: 2022-08-16
• 發明（設計）人: 龍向輝
• 申請（專利權）人: 新疆福祿網絡科技有限公司
• 主分類號: H04L9/40
• 分類號: H04L9/40;H04L67/02;H04L1/00
• 代理公司: 深圳市恒程創新知識產權代理有限公司 44542
• 代理人: 趙愛蓉

本發明公開了一種基于Nginx的數據收集系統及方法，該系統包括Nginx服務器及客戶端；其中，所述客戶端，用于獲取待收集數據，根據所述待收集數據生成數據請求，將所述數據請求通過HTTP方式發送至所述Nginx服務器；所述Nginx服務器，用于將接收的數據請求存儲至日志數據中，對所述日志數據進行分析，獲得待收集數據。本發明技術方案Nginx的數據收集系統實現數據收集，極大的提高了Nginx服務器的并發能力，同時占用的系統資源減少，也降低了成本。

技術領域

本發明涉及數據收集技術領域，尤其涉及一種基于Nginx的數據收集系統及方法。

背景技術

隨著信息時代的發展，很多情況下需要收集各類數據進行分析，而目前的數據收集系統大多都是基于各種高級語言(Java，C#...)開發出數據收集的API接口，提供給客戶端使用。若對于大量的數據請求，要求API接口的并發能力非常高，同時需要解決高并發等一系列問題，這樣會使得并發成本也相應地提高。因此，急需一種數據收集系統來解決上述技術問題。

上述內容僅用于輔助理解本發明的技術方案，并不代表承認上述內容是現有技術。

發明內容

本發明的主要目的在于提供一種基于Nginx的數據收集系統及方法，旨在解決目前數據收集系統要求并發能力高，占用系統資源大，成本增加的技術問題。

為實現上述目的，本發明提供一種基于Nginx的數據收集系統，所述基于Nginx的數據收集系統包括Nginx服務器及客戶端；其中，

所述客戶端，用于獲取待收集數據，根據所述待收集數據生成數據請求，將所述數據請求通過HTTP方式發送至所述Nginx服務器；

所述Nginx服務器，用于將接收的數據請求存儲至日志數據中，對所述日志數據進行分析，獲得待收集數據。

優選地，所述客戶端，還用于建立與所述Nginx服務器之間的HTTP通信連接，通過所述HTTP通信連接將所述數據請求發送預設次數至所述Nginx服務器。

優選地，所述客戶端，還用于對所述待收集數據進行加密，獲得加密數據；對所述加密數據添加校驗碼，以生成對應的數據請求；

所述Nginx服務器，還用于通過所述校驗碼對所述加密數據進行校驗，并將校驗成功的加密數據進行解密，以將解密獲得的待收集數據存儲至日志數據中。

優選地，所述客戶端采用非對稱加密對所述待收集數據進行加密，獲得加密數據；

所述Nginx服務器采用所述非對稱加密的解密方法對所述加密數據進行解密，獲得解密后的待收集數據。

優選地，所述校驗碼中包含數據順序信息；其中，

所述客戶端，還用于對所述加密數據添加包含數據順序信息的校驗碼，以生成對應的數據請求；

所述Nginx服務器，還用于接收所述數據請求，按照所述數據順序信息對所述加密數據進行排序，通過所述校驗碼對所述加密數據進行校驗，將有重復數據順序信息的所述加密數據進行刪除，并對校驗失敗的所述加密數據進行刪除，以獲得校驗成功的所述加密數據。

本發明還提出一種基于Nginx的數據收集方法，所述基于Nginx的數據收集方法包括以下步驟：

客戶端獲取待收集數據，根據所述待收集數據生成數據請求，將所述數據請求通過HTTP方式發送至所述Nginx服務器；

Nginx服務器將接收的所述數據請求存儲至日志數據中，對所述日志數據進行分析，獲得待收集數據。

優選地，所述客戶端獲取待收集數據，根據所述待收集數據生成數據請求，將所述數據請求通過HTTP方式發送至所述Nginx服務器，具體包括：