[發明專利]一種補幀數據的發送方法、裝置及相關組件

有效

• 申請號: 201910300001.0
• 申請日: 2019-04-15
• 公開（公告）號: CN111836117B
• 公開（公告）日: 2022-08-09
• 發明（設計）人: 黃忠強;劉杰洪
• 申請（專利權）人: 深信服科技股份有限公司
• 主分類號: H04N21/845
• 分類號: H04N21/845;H04N21/2343;H04N21/2662
• 代理公司: 深圳市深佳知識產權代理事務所(普通合伙) 44285
• 代理人: 王仲凱

1.一種補幀數據的發送方法，其特征在于，包括：

當接收到補幀指令時，根據所述補幀指令生成當前補幀圖像，并將所述當前補幀圖像與補幀序列中的歷史補幀圖像執行匹配操作；

對所述當前補幀圖像中匹配命中的區域執行緩存編碼操作得到編碼數據，并對所述當前補幀圖像中未匹配命中的區域執行圖像壓縮操作得到壓縮數據；其中，所述編碼數據用于向客戶端指示所述匹配命中的區域在緩存中的位置，以便于所述客戶端直接拷貝緩存中對應位置的內容；所述圖像壓縮操作具體包括對所述未匹配命中的區域執行有損壓縮；

將所述編碼數據和所述壓縮數據作為補幀數據發送至所述客戶端。

2.根據權利要求1所述發送方法，其特征在于，所述根據所述補幀指令生成當前補幀圖像包括：

根據所述補幀指令確定目標時刻，并確定目標時刻對應的當前顯示內容；其中，所述當前顯示內容為服務端向所述客戶端發送的遠程桌面畫面；

將所述當前顯示內容對應的原圖像設置為所述當前補幀圖像。

3.根據權利要求1所述發送方法，其特征在于，對所述當前補幀圖像中未匹配命中的區域執行圖像壓縮操作得到壓縮數據包括：

對所述當前補幀圖像中未匹配命中的區域執行預設畫質的有損壓縮操作得到所述壓縮數據。

4.根據權利要求1所述發送方法，其特征在于，在將全部所述補幀數據發送至客戶端之前，還包括：

判斷是否接收到補幀中斷命令；其中，所述補幀中斷命令包括繪圖指令或客戶端交互指令；

若是，則停止發送所述補幀數據的流程，并刪除所述補幀數據。

5.根據權利要求1至3任一項所述發送方法，其特征在于，將所述編碼數據和所述壓縮數據作為補幀數據發送至客戶端包括：

根據所述編碼數據和所述壓縮數據生成所述補幀數據；

對所述補幀數據執行切片操作得到多個分片數據；

根據當前可用帶寬確定當前發送速率，并將所述分片數據按照所述當前發送速率發送至所述客戶端；其中，所述當前可用帶寬與所述數據發送速率正相關。

6.根據權利要求5所述發送方法，其特征在于，在將所有所述分片數據按照所述當前發送速率發送至所述客戶端之前，還包括：

判斷是否接收到補幀中斷命令；其中，所述補幀中斷命令包括繪圖指令或客戶端交互指令；

若是，則停止發送所述分片數據的操作，并刪除所有未發送的分片數據。

7.根據權利要求6所述發送方法，其特征在于，當接收到所述補幀中斷命令時，還包括：

向所述客戶端發送補幀取消指令，以便所述客戶端根據所述補幀取消指令刪除已接收到的所有分片數據。

8.一種補幀數據的發送裝置，其特征在于，包括：

匹配模塊，用于當接收到補幀指令時，根據所述補幀指令生成當前補幀圖像，并將所述當前補幀圖像與補幀序列中的歷史補幀圖像執行匹配操作；

圖像壓縮模塊，用于對所述當前補幀圖像中匹配命中的區域執行緩存編碼操作得到編碼數據，并對所述當前補幀圖像中未匹配命中的區域執行圖像壓縮操作得到壓縮數據；其中，所述編碼數據用于向客戶端指示所述匹配命中的區域在緩存中的位置，以便于所述客戶端直接拷貝緩存中對應位置的內容；所述圖像壓縮操作具體包括對所述未匹配命中的區域執行有損壓縮；

數據發送模塊，用于將所述編碼數據和所述壓縮數據作為補幀數據發送至所述客戶端。

9.根據權利要求8所述發送裝置，其特征在于，所述匹配模塊包括：

當前顯示內容確定單元，用于根據所述補幀指令確定目標時刻，并確定目標時刻對應的所述當前顯示內容；其中，所述當前顯示內容為服務端向所述客戶端發送的遠程桌面畫面；

當前補幀圖像確定單元，用于將所述當前顯示內容對應的原圖像設置為所述當前補幀圖像；

緩存匹配單元，用于將所述當前補幀圖像與補幀序列中的歷史補幀圖像執行匹配操作。