[發明專利]圖像傳輸方法及裝置

在審

• 申請號: 201711210395.8
• 申請日: 2017-11-28
• 公開（公告）號: CN108174200A
• 公開（公告）日: 2018-06-15
• 發明（設計）人: 李新宇;蘇睿
• 申請（專利權）人: 西安萬像電子科技有限公司
• 主分類號: H04N19/103
• 分類號: H04N19/103;H04N19/157;H04N19/172;H04N19/136;H04N19/137;H04N7/01
• 代理公司: 北京挺立專利事務所(普通合伙) 11265
• 代理人: 葉樹明

本公開提供一種圖像傳輸方法及裝置，涉及圖像處理技術領域，能夠解決利用VNC技術傳輸視頻數據時，接收端容易出現畫面延遲、卡頓的問題。具體技術方案為：獲取待傳輸圖像幀；在確定待傳輸圖像幀中包含視頻數據時，利用數字視頻壓縮格式的編碼算法對視頻數據進行編碼；利用遠程幀緩沖RFB協議中的編碼算法對待傳輸圖像幀中除視頻數據之外的剩余部分進行編碼；向客戶端設備發送編碼后的待傳輸圖像幀。本發明用于圖像傳輸。

技術領域

本公開涉及圖像處理技術領域，尤其涉及圖像傳輸方法及裝置。

背景技術

在圖像遠程投放的過程中，通常需要對待傳輸圖像進行圖像編碼，然后傳輸到接收端，接收端解碼后播放圖像。遠程投放的圖像可以是操作系統的桌面圖像，也可以是視頻數據等。虛擬網絡控制臺(Virtual Network Console，VNC)技術是基于桌面系統開發的，桌面系統的大部分圖像都是靜止的，圖像更新周期較長，圖像更新的區域比較有規律，在VNC技術中，利用遠程幀緩沖(英文：Remote Frame Buffer，RFB)協議的編碼算法對桌面圖像進行編碼，接收端播放桌面圖像較為流暢，鼠標、鍵盤控制的響應速度也非常快，但是在播放視頻數據時效率就非常低，由于視頻數據的數據傳輸量較大，視頻數據的傳輸占用了大量帶寬，在低帶寬的網絡環境下會導致網絡堵塞，而且使用TCP重傳機制會使得圖像幀率降低，在幀率降低到25幀/秒以下時，視覺上就會出現畫面延遲，卡頓等現象。

發明內容

本公開實施例提供一種圖像傳輸方法及裝置，能夠解決利用VNC技術傳輸視頻數據時，接收端容易出現畫面延遲、卡頓的問題。所述技術方案如下：

根據本公開實施例的第一方面，提供一種圖像傳輸方法，該方法包括：

獲取待傳輸圖像幀；

在確定待傳輸圖像幀中包含視頻數據時，利用數字視頻壓縮格式的編碼算法對視頻數據進行編碼；

利用遠程幀緩沖RFB協議中的編碼算法對待傳輸圖像幀中除視頻數據之外的剩余部分進行編碼；

向客戶端設備發送編碼后的待傳輸圖像幀。

對視頻數據使用視頻壓縮格式的編碼算法進行編碼，對除視頻數據之外的剩余部分利用RFB協議中的編碼算法進行編碼，保證了視頻數據傳輸的流暢性，也保證了桌面鼠標、鍵盤控制的響應速度。

在一個實施例中，該方法還包括：

獲取圖像幀流，圖像幀流包含待傳輸圖像幀之前連續的至少一個圖像幀；

在至少一個圖像幀中，變化的宏塊數量大于或等于第一閾值時，確定待傳輸圖像幀包含視頻數據，變化的宏塊為不同的圖像幀中，位置相同，內容不同的宏塊。

根據待傳輸圖像幀之前的圖像幀流確定待傳輸圖像幀中是否包含視頻數據，可以實時對待傳輸圖像幀的編碼方式進行調整，使得編碼方式適應待傳輸圖像幀，提高傳輸效率。

在一個實施例中，該方法還包括：

在確定待傳輸圖像幀中目標宏塊內有效像素的數量大于或等于第二閾值時，將目標宏塊確定為變化的宏塊，至少一個圖像幀中與有效像素位置相同的像素顏色不同。

如果一個位置的宏塊有效像素比較多，說明該位置的宏塊一幀和一幀之間的變化比較大，可以確定是視頻數據。

在一個實施例中，該方法還包括：

對于至少一個圖像幀中位置相同的像素組，若像素組內顏色不同的像素的數量大于或等于預設計數，則將待傳輸圖像幀中與像素組位置相同的像素確定為有效像素。

如果不同圖像幀中相同位置的像素，顏色不同的像素數量較大，說明該位置的像素變化較為頻繁，很可能是視頻數據，可以將其確定為有效像素。

在一個實施例中，該方法還包括：