[發(fā)明專利]增強(qiáng)現(xiàn)實(shí)的圖像展示方法、裝置及設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201811142256.0
• 申請(qǐng)日: 2018-09-28
• 公開（公告）號(hào): CN109615703B
• 公開（公告）日: 2020-04-14
• 發(fā)明（設(shè)計(jì)）人: 周岳峰
• 申請(qǐng)（專利權(quán)）人: 阿里巴巴集團(tuán)控股有限公司
• 主分類號(hào): G06T19/00
• 分類號(hào): G06T19/00
• 代理公司: 北京博思佳知識(shí)產(chǎn)權(quán)代理有限公司 11415
• 代理人: 林祥

本說(shuō)明書實(shí)施例提供一種增強(qiáng)現(xiàn)實(shí)的圖像展示方法、裝置及設(shè)備，本說(shuō)明書實(shí)施例獲取人物攝像模塊所采集的人物圖像，利用人物圖像中的人眼區(qū)域與其所在圖像的關(guān)系，確定人眼與人物攝像模塊的相對(duì)位置；并至少基于人眼與人物攝像模塊的相對(duì)位置、以及場(chǎng)景攝像模塊的位置信息，確定人眼位置信息；以人眼位置信息作為渲染參數(shù)中場(chǎng)景攝像模塊的位置信息，并對(duì)三維模型進(jìn)行渲染，獲得投影在顯示屏幕上的投影圖像，實(shí)現(xiàn)將增強(qiáng)現(xiàn)實(shí)展示內(nèi)容由攝像模塊視角的投影圖像更改為人眼視角的投影圖像，使投影圖像跟隨人眼位置的變更而變更。

技術(shù)領(lǐng)域

本說(shuō)明書涉及圖像處理技術(shù)領(lǐng)域，尤其涉及增強(qiáng)現(xiàn)實(shí)的圖像展示方法、裝置及設(shè)備。

背景技術(shù)

增強(qiáng)現(xiàn)實(shí)(Augmented Reality，簡(jiǎn)稱AR)，可以是指通過(guò)攝影機(jī)攝影的位置及角度并加上圖像分析技術(shù)，讓虛擬世界能夠與現(xiàn)實(shí)世界場(chǎng)景進(jìn)行結(jié)合與交互的技術(shù)。這種技術(shù)可以將真實(shí)的環(huán)境和虛擬的對(duì)象疊加到同一個(gè)畫面而同時(shí)存在，從而給與用戶超越現(xiàn)實(shí)的感官體驗(yàn)。在AR場(chǎng)景中，可以將相機(jī)位置作為渲染參數(shù)之一，對(duì)由虛擬對(duì)象和現(xiàn)實(shí)場(chǎng)景所獲得的三維模型進(jìn)行渲染，獲得投影圖像。然而，所展示的投影圖像與移動(dòng)設(shè)備的位姿相關(guān)，而針對(duì)設(shè)備靜止且拍攝者運(yùn)動(dòng)的情況，設(shè)備不能做出相應(yīng)的響應(yīng)。

發(fā)明內(nèi)容

為克服相關(guān)技術(shù)中存在的問(wèn)題，本說(shuō)明書提供了增強(qiáng)現(xiàn)實(shí)的圖像展示方法、裝置及設(shè)備。

根據(jù)本說(shuō)明書實(shí)施例的第一方面，提供一種增強(qiáng)現(xiàn)實(shí)的圖像展示方法，所述方法包括：

獲取人物攝像模塊所采集的人物圖像，并利用人物圖像中人眼區(qū)域與所述人物圖像的關(guān)系，確定人眼與人物攝像模塊的相對(duì)位置；

至少基于人眼與人物攝像模塊的相對(duì)位置、以及場(chǎng)景攝像模塊的位置信息，確定人眼位置信息；

以人眼位置信息作為渲染參數(shù)中場(chǎng)景攝像模塊的位置信息，對(duì)三維模型進(jìn)行渲染，獲得投影在顯示屏幕上的投影圖像，所述三維模型基于將虛擬對(duì)象與場(chǎng)景攝像模塊所掃描現(xiàn)實(shí)場(chǎng)景相結(jié)合而獲得。

在一個(gè)實(shí)施例中，所述方法應(yīng)用于電子設(shè)備，所述人物攝像模塊包括所述電子設(shè)備的前置攝像頭，所述場(chǎng)景攝像模塊包括所述電子設(shè)備的后置攝像頭。

在一個(gè)實(shí)施例中，所述三維模型的構(gòu)建步驟包括：

利用場(chǎng)景攝像模塊所采集的實(shí)景圖像，對(duì)現(xiàn)實(shí)場(chǎng)景進(jìn)行三維重建，獲得場(chǎng)景模型；

基于預(yù)設(shè)疊加策略，將虛擬對(duì)象疊加至場(chǎng)景模型，獲得三維模型。

在一個(gè)實(shí)施例中，所述至少基于人眼與人物攝像模塊的相對(duì)位置、以及場(chǎng)景攝像模塊的位置信息，確定人眼位置信息，包括：

獲取人物攝像模塊和場(chǎng)景攝像模塊的相對(duì)位置；

利用人物攝像模塊和場(chǎng)景攝像模塊的相對(duì)位置，將人眼與人物攝像模塊的相對(duì)位置，轉(zhuǎn)換為人眼與場(chǎng)景攝像模塊的相對(duì)位置；

結(jié)合人眼與場(chǎng)景攝像模塊的相對(duì)位置、以及場(chǎng)景攝像模塊的位置信息，計(jì)算獲得人眼位置信息。

在一個(gè)實(shí)施例中，所述方法還包括：

在確定人眼位置之前，根據(jù)當(dāng)前所獲得的人眼與人物攝像模塊的相對(duì)位置，與上一次所獲得的人眼與人物攝像模塊的相對(duì)位置，判定人眼與人物攝像模塊的相對(duì)位置發(fā)生變更。

根據(jù)本說(shuō)明書實(shí)施例的第二方面，提供一種增強(qiáng)現(xiàn)實(shí)的圖像展示裝置，所述裝置包括：

相對(duì)位置確定模塊，用于：獲取人物攝像模塊所采集的人物圖像，并利用人物圖像中人眼區(qū)域與所述人物圖像的關(guān)系，確定人眼與人物攝像模塊的相對(duì)位置；

人眼位置確定模塊，用于：至少基于人眼與人物攝像模塊的相對(duì)位置、以及場(chǎng)景攝像模塊的位置信息，確定人眼位置信息；