[發明專利]場景圖像生成方法

有效

• 申請號: 202210536540.6
• 申請日: 2022-05-18
• 公開（公告）號: CN114627134B
• 公開（公告）日: 2022-08-09
• 發明（設計）人: 涂承杰
• 申請（專利權）人: 深圳元象信息科技有限公司
• 主分類號: G06T7/10
• 分類號: G06T7/10;G06T7/80;G06T9/00;A63F13/5255;A63F13/55
• 代理公司: 深圳市力道知識產權代理事務所(普通合伙) 44507
• 代理人: 曹鳳秀

本申請公開了一種場景圖像生成方法，應用于客戶端，方法包括：獲取第一相機參數、第一場景圖像及多個第一像素點的第一空間信息，第一場景圖像為虛擬相機根據第一相機參數拍攝獲得；向服務器輸出交互指令以使服務器生成第二相機參數，并控制虛擬相機根據第二相機參數拍攝目標場景獲得第二場景圖像；獲取服務器根據第二場景圖像生成的場景圖像編碼并提取出目標單元編碼；解析目標單元編碼獲取目標單元的第二空間信息，并根據第一空間信息、第二空間信息、第一相機參數及交互指令確定參考像素點；根據第一場景圖像與參考像素點確定第二像素點的像素信息；根據多個第二像素點的像素信息生成目標場景圖像，從而節約碼流并提升目標場景圖像畫質。

技術領域

本申請涉及圖像處理技術領域，尤其涉及一種場景圖像生成方法。

背景技術

目前，在云游戲等互動場景中，云端服務器的渲染引擎在云端渲染出視頻幀圖像，然后通過視頻編碼器對視頻幀圖像進行編碼壓縮得到圖像編碼，然后將圖像編碼以碼流的形式傳輸到客戶終端，由客戶終端對圖像編碼進行解碼得到與視頻幀圖像對應的圖像并顯示該圖像，以實現視頻的生成。

但現有的圖像編碼解碼方法會造成編譯出來的圖像編碼數據量較大，碼流需求較大，且解碼獲得的圖像畫質較低。

因此，如何節約碼流并且提升客戶端解碼獲得的目標場景圖像畫質，是本領域技術人員正在研究的熱門課題。

發明內容

本申請提供一種場景圖像生成方法，旨在減少圖像編碼的數據量以節約碼流并且提升客戶端解碼獲得的目標場景圖像畫質。

第一方面，本申請提供了一種場景圖像生成方法，應用于客戶端，其特征在于，方法包括：

獲取第一相機參數、第一場景圖像、及第一場景圖像中多個第一像素點的第一空間信息，其中，第一場景圖像為虛擬相機根據第一相機參數拍攝目標場景獲得；

根據第一場景圖像向服務器輸出交互指令，以使服務器根據交互指令生成第二相機參數，并控制虛擬相機根據第二相機參數拍攝目標場景獲得第二場景圖像；

獲取服務器根據第二場景圖像生成的場景圖像編碼，并從場景圖像編碼中提取目標單元編碼；

解析目標單元編碼以獲取目標單元的第二空間信息，并根據第一空間信息、第二空間信息、第一相機參數及交互指令在多個第一像素點中確定第二像素點對應的參考像素點；

根據第一場景圖像與參考像素點確定第二像素點的像素信息；

根據多個第二像素點的像素信息確定目標單元的目標子圖像，并根據多個目標子圖像生成目標場景圖像。

在一些實施方式中，第一空間信息包括第一像素點映射在目標場景的第一映射點在預設方向軸上的第一投影距離，第二空間信息包括第二像素點映射在目標場景的第二映射點在預設方向軸上的第二投影距離；

根據第一空間信息、第二空間信息、第一相機參數及交互指令在多個第一像素點中確定第二像素點對應的參考像素點，包括：

根據第一相機參數及交互指令確定第二相機參數；

根據第一相機參數、第二相機參數、第一投影距離、及第二投影距離在多個第一像素點中確定第二像素點對應的參考像素點。

在一些實施方式中，獲取第一相機參數、第一場景圖像、及第一場景圖像中多個第一像素點的第一空間信息，包括：

獲取服務器輸出的初始圖像編碼；

解析初始圖像編碼，獲取第一相機參數、第一場景圖像、及多個第一像素點對應的第一投影距離；

解析目標單元編碼以獲取目標單元的第二空間信息，包括：

解析目標單元編碼，獲取目標單元中多個第二像素點對應的第二投影距離。