[發明專利]基于RS編碼的云游戲視頻流弱網傳輸優化方法和系統在審

申請號：	202310278057.7	申請日：	2023-03-21
公開（公告）號：	CN116320439A	公開（公告）日：	2023-06-23
發明（設計）人：	李興平;陳旺科;潘光煒	申請（專利權）人：	四三九九網絡股份有限公司
主分類號：	H04N19/164	分類號：	H04N19/164;H04N19/146;H04N19/89;H04N21/647;H04N21/643;H04N21/6437;H04N21/478
代理公司：	北京市盛峰律師事務所 11337	代理人：	席小東
地址：	361009 福建省***	國省代碼：	福建;35
權利要求書：	查看更多	說明書：	查看更多
摘要：
搜索關鍵詞：	基于 rs 編碼云游視頻流弱網傳輸優化方法系統
鉆瓜網技術展會專利詞庫專利權人專利榜在售專利公布日期熱門專利

【權利要求書】：

1.一種基于RS編碼的云游戲視頻流弱網傳輸優化方法，其特征在于，包括以下步驟：

步驟1，發送端實時接收接收端反饋的接收端網絡狀態參數，包括：接收端實時碼率值、接收端實時最大接收碼率估計值和接收端實時丟包率；

發送端對接收到的所述接收端網絡狀態參數進行分析處理，得到發送端控制參數，包括：編碼碼率最佳值、冗余度最佳值和發送速率最佳值；

步驟2，發送端根據所述發送端控制參數，對需要傳輸的原始媒體數據包進行處理，并將處理后的數據包通過網絡傳輸給接收端，具體包括：

步驟2.1，發送端采集得到需要傳輸的原始媒體數據包；

步驟2.2，發送端按照所述編碼碼率最佳值，對所述原始媒體數據包進行編碼，得到編碼后的媒體數據包；

步驟2.3，發送端按照所述冗余度最佳值，生成設定數量的冗余數據包，并對所述冗余數據包進行編碼，得到編碼后的冗余數據包；

步驟2.4，發送端將所述編碼后的媒體數據包和所述編碼后的冗余數據包，按所述發送速率最佳值，采用UDP協議通過網絡傳輸給接收端；

步驟3，接收端接收所述發送端發送的所述編碼后的媒體數據包和所述編碼后的冗余數據包，并檢測是否出現丟包現象，如果有，則恢復丟失的數據包；然后，對所述編碼后的媒體數據包和所述編碼后的冗余數據包進行解碼操作，解碼出所述原始媒體數據包；

接收端實時檢測到接收端網絡狀態參數，并反饋給所述發送端。

2.根據權利要求1所述的基于RS編碼的云游戲視頻流弱網傳輸優化方法，其特征在于，步驟2.4中，所述編碼后的媒體數據包和所述編碼后的冗余數據包，均為通過RTP編碼后的RTP數據包。

3.一種基于RS編碼的云游戲視頻流弱網傳輸優化系統，其特征在于，包括發送端和接收端；

所述發送端包括：數據采集模塊、編碼模塊、冗余數據包生成編碼模塊RSFEC、打包模塊、平滑發送模塊、UDP發送端傳輸模塊、發送端擁塞控制模塊、碼率控制器和接收端反饋接收模塊；

所述接收端包括：UDP接收模塊、識別模塊、RSFEC解碼模塊、抗抖緩存模塊、解碼模塊、數據消耗模塊和接收端擁塞控制模塊；

所述接收端反饋接收模塊，用于接收來自于所述接收端擁塞控制模塊傳輸的RTCPRTPFB反饋報文、RTCP?REMB反饋報文、RTCP?RR反饋報文和RTCP?NACK反饋報文；

所述發送端擁塞控制模塊，用于對所述RTCP?RTPFB反饋報文進行解析，得到接收端實時碼率值，并將所述接收端實時碼率值傳輸給所述碼率控制器；

所述碼率控制器，用于對所述RTCP?REMB反饋報文進行解析，得到接收端實時最大接收碼率估計值；對所述RTCP?RR反饋報文進行解析，得到接收端實時丟包率；然后，對所述接收端實時碼率值、接收端實時最大接收碼率估計值和接收端實時丟包率進行分析處理，得到發送端控制參數，包括：編碼碼率最佳值、冗余度最佳值和發送速率最佳值，將所述編碼碼率最佳值傳輸給所述編碼模塊，將所述冗余度最佳值傳輸給所述冗余數據包生成編碼模塊RSFEC，將所述發送速率最佳值傳輸給所述平滑發送模塊；

所述數據采集模塊，用于采集得到需要傳輸的原始媒體數據包；

所述編碼模塊，用于按照所述編碼碼率最佳值，對所述原始媒體數據包進行編碼，得到編碼后的媒體數據包；

所述冗余數據包生成編碼模塊RSFEC，用于按照所述冗余度最佳值，生成設定數量的冗余數據包，并對所述冗余數據包進行編碼，得到編碼后的冗余數據包；

所述打包模塊，用于將所述編碼后的媒體數據包和所述編碼后的冗余數據包進行打包處理；

所述平滑發送模塊，用于對打包后的所述編碼后的媒體數據包和所述編碼后的冗余數據包，進行平滑發送處理，即：控制發送速率為所述發送速率最佳值；

所述UDP發送端傳輸模塊，用于按所述發送速率最佳值，采用UDP協議通過網絡傳輸給接收端；

所述UDP接收模塊，用于監聽相關端口，接收所述發送端發送的所述編碼后的媒體數據包和所述編碼后的冗余數據包；

所述識別模塊，用于識別所述UDP接收模塊接收到的數據包的類型，即：識別接收到的數據包為所述編碼后的媒體數據包還是所述編碼后的冗余數據包；當檢測到有丟包后，將所述編碼后的冗余數據包和待恢復的包序號傳遞給所述RSFEC解碼模塊；同時，將所述編碼后的媒體數據包排序進入所述抗抖緩存模塊；

所述RSFEC解碼模塊，用于根據所述識別模塊傳輸的所述編碼后的冗余數據包和待恢復的包序號，恢復丟失的數據包，并將恢復出的數據包排序進入所述抗抖緩存模塊；

所述解碼模塊，定時讀取所述抗抖緩存模塊中的所述編碼后的媒體數據包，解碼出所述原始媒體數據包；

所述數據消耗模塊，用于使用所述解碼模塊解碼出的所述原始媒體數據包；

所述接收端擁塞控制模塊，用于實時檢測到接收端網絡狀態參數，并反饋給所述發送端。