[發明專利]邊緣數據傳輸方法和系統

有效

• 申請號: 202010812331.0
• 申請日: 2020-08-13
• 公開（公告）號: CN112019604B
• 公開（公告）日: 2023-09-01
• 發明（設計）人: 王翔宇;白鑫;馬天駿
• 申請（專利權）人: 上海嗶哩嗶哩科技有限公司
• 主分類號: H04L67/566
• 分類號: H04L67/566;H04L67/145;H04L67/02
• 代理公司: 北京英特普羅知識產權代理有限公司 11015
• 代理人: 王勇;鄧小玲

本申請實施例提供了一種邊緣數據傳輸方法，用于數據傳輸鏈路的邊緣節點中，所述方法包括：接收數據源提供的數據，所述數據包括多個請求；對所述多個請求進行聚合，以生成一個或多個聚合請求；及將所述一個或多個聚合請求發送到所述數據傳輸鏈路中所述邊緣節點的下一個節點。本申請實施例所述的方案可以降低網絡帶寬和QPS。

技術領域

本申請實施例涉及計算機技術領域，尤其涉及一種邊緣數據傳輸方法、系統、計算機設備、計算機可讀存儲介質以及數據傳輸系統。

背景技術

當前的流式數據傳輸系統一般由數據傳輸層(如網關)、數據緩存層、數據分發層(controller)和數據存儲終端構成。當數據源有數據上報時，所述數據源會將上報數據通過CDN(Content?Delivery?Network內容分發網絡)節點轉發到數據傳輸層，并經由所述數據緩存層、所述數據分發層最終流入到所述數據存儲終端。

然而，通過CDN節點直接轉發數據源的上報數據，會有以下后果：數據傳輸鏈路中的帶寬消耗大、后端服務節點(如數據存儲終端)的QPS壓力大，和網關的RT抖動嚴重。

發明內容

本申請實施例的目的是提供一種邊緣數據傳輸方法、系統、計算機設備、計算機可讀存儲介質以及數據傳輸系統，可以用于解決以下問題：通過CDN節點直接轉發數據源的上報數據，導致數據傳輸鏈路中的帶寬消耗大、后端服務節點的QPS壓力大，和網關的RT抖動嚴重。

本申請實施例的一個方面提供了一種邊緣數據傳輸方法，用于數據傳輸鏈路的邊緣節點中，所述方法包括：接收數據源提供的數據，所述數據包括多個請求；對所述多個請求進行聚合，以生成一個或多個聚合請求；及將所述一個或多個聚合請求發送到所述數據傳輸鏈路中所述邊緣節點的下一個節點。

可選的，所述接收數據源提供的數據，還包括：根據所述多個請求中的各個請求的元數據信息，將所述各個請求導入到不同的通道中。

可選的，所述通道包括第一通道和第二通道；對所述多個請求進行聚合，以生成一個或多個聚合請求，包括：對所述第一通道中的多個請求進行聚合，以生成所述第一通道內的一個或多個聚合請求；對所述第二通道中的多個請求進行聚合，以生成所述第二通道內的一個或多個聚合請求；將所述一個或多個聚合請求發送到所述數據傳輸鏈路中所述邊緣節點的下一個節點，包括：通過所述第一通道發送其內部的一個或多個聚合請求，及通過所述第二通道發送其內部的一個或多個聚合請求。

可選的，所述將所述一個或多個聚合請求發送到所述數據傳輸鏈路中所述邊緣節點的下一個節點，包括：根據后端服務節點的服務狀態，動態地確定所述一個或多個聚合請求的處理操作；其中，所述后端服務節點為在所述數據傳輸鏈路中位于所述邊緣節點下游的一個或多個節點。

可選的，所述根據后端服務節點的服務狀態，動態地確定所述一個或多個聚合請求的處理操作，包括：判斷所述服務狀態是否處于過載狀態；如果所述服務狀態處于所述過載狀態，則暫存所述一個或多個聚合請求；如果所述服務狀態處于非過載狀態，則將所述一個或多個聚合請求發送到所述下一個節點中。

可選的，所述判斷所述服務狀態是否處于過載狀態，包括：記錄已發送請求和相應的響應之間的時間間隔；及如果該時間間隔大于預設時間間隔，則確定所述服務狀態處于所述過載狀態。

可選的，還包括：維持所述邊緣節點的心跳操作，以便節點管理設備對所述邊緣節點和其他邊緣節點的統一管理。

本申請實施例的再一個方面提供了一種邊緣數據傳輸系統，所述系統包括：接收模塊，用于接收數據源提供的數據，所述數據包括多個請求；聚合模塊，用于對所述多個請求進行聚合，以生成一個或多個聚合請求；發送模塊，用于將所述一個或多個聚合請求發送到所述數據傳輸鏈路中所述邊緣節點的下一個節點。