[發明專利]圖像處理方法及裝置

在審

• 申請號: 202210175927.3
• 申請日: 2022-02-25
• 公開（公告）號: CN114666567A
• 公開（公告）日: 2022-06-24
• 發明（設計）人: 馬權
• 申請（專利權）人: 西安萬像電子科技有限公司
• 主分類號: H04N13/383
• 分類號: H04N13/383;H04N13/366;H04N13/194;H04N13/161;H04N19/167;H04N19/597;H04N19/146;H04N19/30;H04L67/131
• 代理公司: 北京挺立專利事務所(普通合伙) 11265
• 代理人: 韓暢

本公開提供一種圖像處理方法及裝置，涉及圖像處理領域，能夠解決現有技術需要很高的算力且占用很大的網絡帶寬的問題。具體技術方案為：圖像接收端獲取注視點；根據注視點確定第一關注區域；將第一關注區域發送至圖像發送端；圖像發送端接收第一關注區域；根據第一關注區域確定無損采集區域以及下采樣區域；對無損采集區域內的下一幀圖像進行無損采集，生成無損圖像；對下采樣區域內的下一幀圖像進行下采樣，生成下采樣圖像；對無損圖像和下采樣圖像進行編碼，生成下一幀圖像的碼流；將下一幀圖像的碼流發送至圖像接收端；圖像接收端接收下一幀圖像的碼流并對下一幀圖像的碼流進行解碼，生成下一幀圖像。本發明用于減少算力以及占用帶寬。

技術領域

本公開涉及圖像處理領域，尤其涉及圖像處理方法及裝置。

背景技術

隨著云技術的發展，用戶可以使用算力較低的終端設備，例如虛擬現實(VirtualRealty，VR)眼鏡或者計算機來運行高算力的云游戲。在云端將云游戲的視頻圖像進行編碼，以壓縮碼流。在終端設備上，對云游戲的視頻圖像進行解碼和顯示。但是，由于云游戲的視頻圖像一般具有很高的分辨率，例如8K(7680X4096)，編碼和傳輸如此巨大的視頻圖像需要很高的算力，同時，為了使得用戶在體驗云游戲時，不產生眩暈感，需要很高的刷新頻率，至少要達到144hz以上，如此一來，單位時間內傳輸的碼流將會非常大，需要占用很大的網絡帶寬以傳輸碼流，在網絡質量較差，網絡帶寬不夠時,會降低云游戲視頻圖像的刷新頻率，使得用戶在觀看云游戲時，會產生眩暈感，用戶體驗較差。

發明內容

本公開實施例提供一種圖像處理方法及裝置，能夠解決現有技術需要很高的算力且需要占用很大的網絡帶寬的問題。所述技術方案如下：

根據本公開實施例的第一方面，提供一種圖像處理方法，應用于圖像接收端，包括：

獲取用戶觀看屏幕上顯示的前幀圖像的注視點；

根據所述注視點確定用戶在屏幕上的第一關注區域；

將所述第一關注區域發送至圖像發送端，以便所述圖像發送端根據所述第一關注區域對下一幀圖像進行采集并編碼；

接收所述圖像發送端發送的下一幀圖像的碼流并對所述下一幀圖像的碼流進行解碼，生成所述下一幀圖像。

本公開實施例提供的圖像處理方法，圖像接收端能夠將第一關注區域發送至圖像發送端，使得圖像發送端能夠對第一關注區域對應的無損采集區域內的下一幀圖像無損采集后編碼傳輸，提高清晰度，滿足用戶的觀看需要，并對根據第一關注區域確定的下采樣區域的下一幀圖像下采樣后編碼傳輸，減少數據的處理量以及數據的傳輸量，在不影響用戶觀看體驗的前提下降低算力并且降低占用帶寬，避免了網絡帶寬不夠時，會降低云游戲視頻圖像的刷新頻率，使得用戶在觀看云游戲時，會產生眩暈感，用戶體驗較差的問題。

在一個實施例中，所述根據所述注視點確定用戶在屏幕的第一關注區域后，所述方法還包括：

根據所述第一關注區域確定用戶屏幕上的第二關注區域；

所述將所述第一關注區域發送至圖像發送端包括：

將所述第一關注區域以及所述第二關注區域發送至圖像發送端。

在一個實施例中，所述根據所述第一關注區域確定用戶屏幕上的第二關注區域包括：

根據所述第一關注區域確定用戶屏幕上的第三關注區域，所述第一關注區域位于所述第三關注區域的中心，所述第三關注區域面積是的所述第一關注區域面積的預設倍數；

將所述第三關注區域中除所述第一關注區域外的區域作為所述第二關注區域。

根據本公開實施例的第二方面，提供一種圖像處理方法，應用于圖像發送端，所述方法包括：

接收圖像接收端發送的第一關注區域；