[發明專利]圖像處理方法及裝置、存儲介質

有效

• 申請號: 201710625644.3
• 申請日: 2017-07-27
• 公開（公告）號: CN109309866B
• 公開（公告）日: 2022-03-08
• 發明（設計）人: 魏扼
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/4788;H04N21/858;H04L67/131;H04L65/40;H04L65/1069;H04L65/1083
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 趙福梅;張穎玲

本發明公開一種圖像處理方法、裝置及存儲介質，方法包括：在本端客戶端的實時通信進程中建立與對端客戶端的數據通道，通過數據通道與對端客戶端傳輸視頻流；在圖像識別進程中獲得實時通信進程中傳輸的視頻流；對視頻流的各視頻幀進行圖像檢測得到各視頻幀中目標對象的位置，并傳輸至本端客戶端的頁面進程；在本端客戶端的頁面進程中獲得實時通信進程中傳輸的視頻流，根據實時通信進程中傳輸的視頻流進行解碼和渲染，以及，在渲染的各視頻幀中對應相應目標對象的位置，根據虛擬對象模型渲染虛擬對象。

技術領域

本發明涉及圖像技術，尤其涉及一種圖像處理方法及裝置、存儲介質。

背景技術

增強現實(AR，Augmented Reality)是一種全新的人機交互技術，利用該技術，可以模擬真實的現場景觀。AR是以交互性和構想為基本特征的計算機高級人機界面。使用者不僅能夠通過虛擬現實系統感受到在客觀物理世界中所經歷的“身臨其境”的逼真性，而且能夠突破空間、時間以及其它客觀限制，感受到在真實世界中無法親身經歷的體驗。

隨著通信網絡的不斷發展，AR已經逐步在網絡實時通信中進行適用，例如全球廣域網絡(World Wide Web，Web)領域也開始嘗試融入AR技術。然而，由于AR依賴的圖像處理、識別技術的計算量特別大，故在網絡通信的場景中難以實現決AR性能優化。

發明內容

本發明實施例提供一種圖像處理方法及裝置、存儲介質，能夠有效解決網絡實時場景中AR的性能優化問題。

本發明實施例的技術方案是這樣實現的：

第一方面，本發明實施例提供一種圖像處理方法，包括：

在本端客戶端的實時通信進程中建立與對端客戶端的數據通道，通過所述數據通道與所述對端客戶端傳輸視頻流；

在圖像識別進程中獲得所述實時通信進程中傳輸的視頻流，對所述視頻流的各視頻幀進行圖像檢測，得到所述各視頻幀中目標對象的位置并傳輸至所述本端客戶端的頁面進程；

在所述本端客戶端的頁面進程中獲得所述實時通信進程中傳輸的視頻流，根據所述實時通信進程中傳輸的視頻流進行解碼和渲染，以及，

在渲染的各視頻幀中對應相應目標對象的位置，根據虛擬對象模型渲染虛擬對象。

第二方面，本發明實施例提供一種圖像處理裝置，包括：

實時通信進程模塊，用于在本端客戶端的實時通信進程中建立與對端客戶端的數據通道，通過所述數據通道與所述對端客戶端傳輸視頻流；

圖像識別進程模塊，用于在圖像識別進程中獲得所述實時通信進程中傳輸的視頻流，對所述視頻流的各視頻幀進行圖像檢測得到所述各視頻幀中目標對象的位置，并傳輸至所述本端客戶端的頁面進程；

頁面進程模塊，用于在所述本端客戶端的頁面進程中獲得所述實時通信進程中傳輸的視頻流，根據所述實時通信進程中傳輸的視頻流進行解碼和渲染，以及，在渲染的各視頻幀中對應相應目標對象的位置，根據虛擬對象模型渲染虛擬對象。

第三方面，本發明實施例提供一種圖像處理裝置，包括：

存儲器，配置為存儲可執行程序；

處理器，配置為通過執行所述存儲器中存儲的可執行程序時，實現本發明實施例所述圖像處理方法。

第四方面，本發明實施例提供一種存儲介質，存儲有可執行程序，所述可執行程序被處理器執行時，實現本發明實施例所述圖像處理方法。