[發明專利]日志數據的傳輸方法、裝置、電子設備及存儲介質有效
| 申請號: | 202010883234.0 | 申請日: | 2020-08-27 |
| 公開(公告)號: | CN111953551B | 公開(公告)日: | 2023-05-16 |
| 發明(設計)人: | 馮陽;劉柏;周彩冬;范長杰;李仁杰;胡志鵬 | 申請(專利權)人: | 網易(杭州)網絡有限公司 |
| 主分類號: | H04L41/069 | 分類號: | H04L41/069;H04L67/10 |
| 代理公司: | 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463 | 代理人: | 彭星 |
| 地址: | 310052 浙江省杭州*** | 國省代碼: | 浙江;33 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 日志 數據 傳輸 方法 裝置 電子設備 存儲 介質 | ||
本申請提供一種日志數據的傳輸方法、裝置、電子設備及存儲介質,涉及數據處理技術領域。該方法可以應用于分布式集群系統中的服務器,該分布式集群系統可以包括多個服務器,該方法可以獲取目標日志數據的目標發送端地址和目標接收端地址,目標接收端地址為服務器的地址,目標發送端地址為客戶端的地址;根據目標發送端地址和目標接收端地址,生成針對目標日志數據的日志直傳接口,并選擇獲取目標網絡傳輸鏈路;通過目標網絡傳輸鏈路接收客戶端基于日志直傳接口發送的目標日志數據,使得對于客戶端來說,可以根據服務器中生成的日志直傳接口直接向服務器發送目標日志數據,實現日志數據的自動化傳輸和實時傳輸,可以降低人力成本,提高傳輸效率。
技術領域
本申請涉及數據處理技術領域,特別涉及一種日志數據的傳輸方法、裝置、電子設備及存儲介質。
背景技術
隨著移動互聯網的迅猛發展,日志數據在處理歷史數據、診斷問題的追蹤以及系統活動的理解等方面發揮著重要作用。以用戶在游戲過程中產生的游戲日志為例,游戲日志可以記錄用戶在游戲過程中的操作行為,通過該游戲日志可以對用戶的狀態,行為等進行分析,挖掘出有價值的信息;同時也能夠對游戲服務中存在的問題進行定位。其中,在一些特殊場景下,比如,對于出海的游戲,為了使得玩家可以獲得良好的游戲體驗,游戲服務器一般都部署在海外。
現有的,對于出海游戲所產生的日志數據來說,一般都需要游戲運維工作人員將出海游戲所產生的日志打包到海外服務器之后,通過一些網絡傳輸工具將推送到國內服務器。
但由于現有游戲日志數據的收集、打包需要運維人工參與,因此,存在人力成本較高,且傳輸效率低的問題。
發明內容
本申請的目的在于,針對上述現有技術中的不足,提供一種日志數據的傳輸方法、裝置、電子設備及存儲介質,可以解決現有日志數據傳輸時人力成本高、且傳輸效率低的問題。
為實現上述目的,本申請實施例采用的技術方案如下:
第一方面,本申請實施例提供了一種日志數據的傳輸方法,應用于分布式集群系統中的服務器,分布式集群系統包括多個服務器,該方法包括:
獲取目標日志數據的目標發送端地址和目標接收端地址,目標接收端地址為服務器的地址,目標發送端地址為客戶端的地址;
根據目標發送端地址和目標接收端地址,生成針對目標日志數據的日志直傳接口,并選擇獲取目標網絡傳輸鏈路;
通過目標網絡傳輸鏈路接收客戶端基于日志直傳接口發送的目標日志數據。
可選地,上述獲取目標日志數據的目標發送端地址和目標接收端地址,包括:
接收客戶端發送的地址選擇請求,地址選擇請求包括:目標發送端地址;根據地址選擇請求,向客戶端反饋目標接收端地址列表;接收客戶端根據目標接收端地址列表發送的地址響應,地址響應包括:目標接收端地址。
可選地,上述根據目標發送端地址和目標接收端地址,選擇獲取目標網絡傳輸鏈路,包括:
獲取目標發送端地址和目標接收端地址之間多個網絡傳輸鏈路的網絡傳輸參數;根據網絡傳輸參數和預設時間間隔,分別計算獲取目標發送端地址和目標接收端地址之間各網絡傳輸鏈路的網絡延遲參數和丟包率;根據網絡延遲參數和丟包率,選擇網絡延遲參數和丟包率最小的網絡傳輸鏈路作為目標網絡傳輸鏈路。
可選地,上述通過目標網絡傳輸鏈路接收客戶端基于日志直傳接口發送的目標日志數據,包括:
監測獲取客戶端發送目標日志數據的傳輸速率;根據目標日志數據的傳輸速率和預設閾值,確定分片擴容或分片縮容;若獲取擴容后的多個服務器,則采用擴容后的多個服務器,通過目標網絡傳輸鏈路接收客戶端基于日志直傳接口發送的目標日志數據;或者,若獲取縮容后的至少一個服務器,則采用縮容后的至少一個服務器,通過目標網絡傳輸鏈路接收客戶端基于日志直傳接口發送的目標日志數據。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于網易(杭州)網絡有限公司,未經網易(杭州)網絡有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202010883234.0/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





