[發(fā)明專利]一種應用于VR場景下的圖像處理方法、裝置及電子設備

在審

• 申請?zhí)枺?/td>: 201811580396.6
• 申請日: 2018-12-24
• 公開（公告）號: CN109656367A
• 公開（公告）日: 2019-04-19
• 發(fā)明（設計）人: 楊雷
• 申請（專利權(quán)）人: 深圳超多維科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06T15/04;G06T19/00
• 代理公司: 北京銀龍知識產(chǎn)權(quán)代理有限公司 11243
• 代理人: 許靜;安利霞

1.一種應用于VR場景下的圖像處理方法，其特征在于，包括：

獲取第一時刻用戶的第一頭部姿態(tài)信息，根據(jù)所述第一頭部姿態(tài)信息采用虛擬攝像機拍攝獲取對應的第一圖像信息；

根據(jù)所述第一頭部姿態(tài)信息生成第一頭部姿態(tài)矩陣，根據(jù)所述第一頭部姿態(tài)矩陣，將所述第一圖像信息進行緩存處理；

獲取在顯示屏幕上顯示目標圖像的時刻用戶的第二頭部姿態(tài)信息所對應的第二頭部姿態(tài)矩陣；

根據(jù)所述第一頭部姿態(tài)矩陣、所述第二頭部姿態(tài)矩陣以及經(jīng)過緩存處理的所述第一圖像信息，生成在所述顯示屏幕上顯示的目標圖像。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取第一時刻用戶的第一頭部姿態(tài)信息，根據(jù)所述第一頭部姿態(tài)信息采用虛擬攝像機拍攝獲取對應的第一圖像信息的步驟，包括：

根據(jù)地磁傳感器、加速度傳感器以及陀螺儀在第一時刻采集的用戶頭部姿態(tài)數(shù)據(jù)信息，融合出用戶在第一時刻所對應的第一頭部姿態(tài)信息；

根據(jù)所述第一頭部姿態(tài)信息，確定所述虛擬攝像機所對應的拍攝方向；

獲取所述虛擬攝像機在所對應的拍攝方向上所拍攝的第一圖像信息。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述第一頭部姿態(tài)信息生成第一頭部姿態(tài)矩陣，根據(jù)所述第一頭部姿態(tài)矩陣，將所述第一圖像信息進行緩存處理的步驟，包括：

根據(jù)所述第一頭部姿態(tài)信息計算所對應的第一頭部姿態(tài)矩陣；

根據(jù)所述第一頭部姿態(tài)矩陣、模型矩陣、視圖矩陣以及投影矩陣，計算第一變換矩陣；

根據(jù)所述第一變換矩陣，將所述第一圖像信息渲染至離屏紋理上進行緩存。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)所述第一頭部姿態(tài)矩陣、模型矩陣、視圖矩陣以及投影矩陣，計算第一變換矩陣的步驟，包括：

計算所述模型矩陣、所述視圖矩陣、所述第一頭部姿態(tài)矩陣以及所述投影矩陣的乘積，獲取所述第一變換矩陣。

5.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述根據(jù)所述第一變換矩陣，將所述第一圖像信息渲染至離屏紋理上進行緩存的步驟，包括：

根據(jù)所述第一變換矩陣，對所述第一圖像信息中的物體進行頂點坐標變換，生成所述第一圖像信息所對應的像素點信息；

根據(jù)所述第一圖像信息所對應的像素點信息進行圖像處理，將處理后的所述第一圖像信息進行離屏緩存。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取在顯示屏幕上顯示目標圖像的時刻用戶的第二頭部姿態(tài)信息所對應的第二頭部姿態(tài)矩陣的步驟，包括：

在顯示所述目標圖像的時刻，根據(jù)地磁傳感器、加速度傳感器和陀螺儀采集的用戶頭部姿態(tài)數(shù)據(jù)信息，融合出用戶當前的第二頭部姿態(tài)信息；

根據(jù)所述第二頭部姿態(tài)信息計算所對應的第二頭部姿態(tài)矩陣。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述第一頭部姿態(tài)矩陣、所述第二頭部姿態(tài)矩陣以及經(jīng)過緩存處理的所述第一圖像信息，生成在所述顯示屏幕上顯示的目標圖像的步驟，包括：

將根據(jù)所述第一頭部姿態(tài)矩陣進行緩存處理的第一圖像信息，映射至所述虛擬攝像機遠截面上，獲取映射圖像信息；

根據(jù)所述第一頭部姿態(tài)矩陣的逆矩陣、所述第二頭部姿態(tài)矩陣以及投影矩陣，生成第二變換矩陣；

根據(jù)所述第二變換矩陣，對所述映射圖像信息進行重投影計算，生成在所述顯示屏幕上顯示的所述目標圖像。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述根據(jù)所述第一頭部姿態(tài)矩陣的逆矩陣、所述第二頭部姿態(tài)矩陣以及投影矩陣，生成第二變換矩陣的步驟，包括：

計算所述第一頭部姿態(tài)矩陣的逆矩陣、所述第二頭部姿態(tài)矩陣以及所述投影矩陣的乘積，獲取所述第二變換矩陣。