[發明專利]基于渲染引擎的實時圖像處理方法以及顯示設備

有效

• 申請號: 201880002115.0
• 申請日: 2018-11-21
• 公開（公告）號: CN109643462B
• 公開（公告）日: 2023-07-04
• 發明（設計）人: 王雪豐;李文宇;苗京花;趙斌;孫玉坤;王立新;李茜;陸原介;索健文;彭金豹;范清文;李治富;張浩;陳麗莉
• 申請（專利權）人: 京東方科技集團股份有限公司;北京京東方光電科技有限公司
• 主分類號: G06T15/20
• 分類號: G06T15/20;G06T15/55;G06T19/20;G06F3/14
• 代理公司: 北京天昊聯合知識產權代理有限公司 11112
• 代理人: 柴亮;張天舒

本申請公開了基于渲染引擎實時處理圖像數據的方法。所述方法包括：采樣將在具有第二像素排列的像素的顯示屏幕中顯示為圖像的第一像素排列的第一數據集合。所述方法還包括創建第一模型和第二模型，第一模型映射有第一數據集合以產生第二數據集合并且第二模型映射有第一數據集合以產生第三數據集合。此外，所述方法還包括：利用第一著色器渲染第二數據集合以輸出第四數據集合，以及利用第二著色器渲染第三數據集合以輸出第五數據集合。此外，所述方法包括：將第四數據集合疊加在第五數據集合上以顯示第六數據集合。

技術領域

本申請涉及圖像處理技術，更具體地，涉及基于渲染引擎的實時圖像處理方法、實時圖像處理設備、以及實現所述方法的顯示設備。

背景技術

比如虛擬現實(VR)或增強現實(AR)之類的顯示產品的現代顯示技術需要在顯示靜態圖像或視頻圖像的同時進行實時圖像處理。渲染引擎恰好是一種與這些顯示產品相關聯的實時圖像處理器，用于實時地處理圖像數據并且將可以采樣的虛擬場景方面的處理后的圖像數據輸出至顯示屏幕進行顯示。此外，一直以來要求這些產品有更高的圖像分辨率。

發明內容

在一方面，本公開提供了一種基于渲染引擎實時處理圖像數據的方法。所述方法包括：采樣將在具有第二像素排列的像素的顯示屏幕中顯示為圖像的第一像素排列的第一數據集合。所述方法還包括：將所述第一數據集合映射至用于渲染引擎的第一模型以產生第二數據集合，并且將第一數據集合映射至用于渲染引擎的第二模型以產生第三數據集合。此外，所述方法包括：將第二數據集合和第三數據集合加載至渲染引擎，并且利用與第一像素排列相關聯的第一著色器通過渲染引擎處理第二數據集合以輸出第四數據集合。所述方法還包括：利用與第二像素排列相關聯的第二著色器通過渲染引擎處理第三數據集合以輸出第五數據集合。此外，所述方法包括：將第四數據集合疊加在第五數據集合上以獲得第六數據集合。此外，所述方法包括：在具有第二像素排列的像素的顯示屏幕中顯示第六數據集合。

可選地，所述方法還包括：基于顯示屏幕創建用于渲染引擎的第一模型和第二模型。創建第一模型的步驟包括：產生第一數量的矩形條狀體，每個矩形條狀體具有像素的第一寬度和一行第二數量的像素的第一長度并且通過一行像素與相鄰的矩形條狀體分隔開。第一數量和第二數量分別表示與顯示屏幕相關聯的豎直顯示分辨率的一半和橫向顯示分辨率的一半。第二模型由與顯示屏幕對應的、具有第二寬度和第二長度的矩形體表征，第二寬度等于一行像素的第一長度，第二長度等于兩倍于第一數量行的像素的第一寬度之和。

可選地，采樣第一數據集合的步驟包括：利用與渲染引擎相關聯的采樣相機實時地收集第一數據集合。

可選地，采樣相機包括正交投影相機或透視投影相機。

可選地，將第一數據集合映射至第一模型以產生第二數據集合的步驟包括：通過按照UV映射將第一數據集合轉換為第二數據集合來產生第一虛擬圖像，所述第一虛擬圖像的第一邊緣與第一模型的第一數量的矩形條狀體中的第一個對齊。將第一數據集合映射至第二模型以產生第三數據集合的步驟包括：通過按照UV映射將第一數據集合轉換為第三數據集合來產生附著至第二模型的單個矩形體的第二虛擬圖像。

可選地，將第二數據集合和第三數據集合加載至渲染引擎包括：產生分別加載至渲染引擎的至少承載與第一模型相關聯的第二數據集合的信息的第一Filmbox(FBX)文件以及至少承載與第二模型相關聯的第三數據集合的信息的第二FBX文件。

可選地，所述方法還包括：創建與第一像素排列相關聯的第一著色器。創建第一著色器的步驟包括：定義對第一像素排列的圖像數據的一個或多個計算機可執行處理，第一像素排列的每行像素以真實RGB子像素順序排列。

可選地，處理第二數據集合的步驟包括：通過渲染引擎渲染第一虛擬圖像。處理第二數據集合的步驟還包括：通過第一著色器對與第一模型相關聯的第二數據集合調整顏色、紋理和網格信息，以獲得第一像素排列的第四數據集合。