[發(fā)明專利]交互式投影控制方法、裝置、存儲(chǔ)介質(zhì)及電子設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201811377648.5
• 申請(qǐng)日: 2018-11-19
• 公開（公告）號(hào): CN109521879B
• 公開（公告）日: 2022-02-18
• 發(fā)明（設(shè)計(jì)）人: 郭宗義;趙辰;叢林;李曉燕;周志敏
• 申請(qǐng)（專利權(quán)）人: 杭州易現(xiàn)先進(jìn)科技有限公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06T7/73;G06T7/33;G06V10/74;G06V40/10;G06K9/62
• 代理公司: 北京律智知識(shí)產(chǎn)權(quán)代理有限公司 11438
• 代理人: 袁禮君;闞梓瑄

本發(fā)明的實(shí)施方式涉及計(jì)算機(jī)技術(shù)領(lǐng)域，更具體地，本發(fā)明的實(shí)施方式涉及交互式投影控制方法、交互式投影控制裝置、存儲(chǔ)介質(zhì)及電子設(shè)備。該方法包括：采集預(yù)設(shè)物體的當(dāng)前深度圖像；根據(jù)所述當(dāng)前深度圖像確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)；根據(jù)所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)投射與所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)對(duì)應(yīng)的影像。本發(fā)明可以降低交互式投影技術(shù)所需的設(shè)備與硬件成本，并提高投影控制的反饋速率，實(shí)現(xiàn)互動(dòng)性較強(qiáng)的投影控制。

技術(shù)領(lǐng)域

本發(fā)明的實(shí)施方式涉及計(jì)算機(jī)技術(shù)領(lǐng)域，更具體地，本發(fā)明的實(shí)施方式涉及一種交互式投影控制方法、交互式投影控制裝置、存儲(chǔ)介質(zhì)及電子設(shè)備。

背景技術(shù)

本部分旨在為權(quán)利要求中陳述的本發(fā)明的實(shí)施方式提供背景或上下文，此處的描述不因?yàn)榘ㄔ诒静糠种芯统姓J(rèn)是現(xiàn)有技術(shù)。

交互式投影技術(shù)是將人機(jī)交互與實(shí)時(shí)投影相結(jié)合的技術(shù)，該技術(shù)基于傳感器、投影光機(jī)、計(jì)算系統(tǒng)等軟硬件平臺(tái)，可以根據(jù)用戶輸入的控制指令，實(shí)時(shí)地呈現(xiàn)投影效果，給予用戶實(shí)時(shí)的交互反饋。目前已應(yīng)用于虛擬現(xiàn)實(shí)（VR）、增強(qiáng)現(xiàn)實(shí)（AR）、舞臺(tái)表演、體感游戲等多個(gè)領(lǐng)域。其中，如何快速識(shí)別用戶的控制指令，例如識(shí)別用戶的手勢(shì)、姿態(tài)等，以降低交互反饋的延遲，提高用戶的使用體驗(yàn)，成為制約交互式投影技術(shù)發(fā)展的關(guān)鍵問題。

現(xiàn)有的交互式投影控制方法通常依賴于安裝多個(gè)傳感器，以從不同角度、不同平面識(shí)別用戶的控制指令，例如大型虛擬現(xiàn)實(shí)場(chǎng)景需要在場(chǎng)景的不同角落分別設(shè)置相機(jī)，以準(zhǔn)確測(cè)定用戶的姿態(tài)。

發(fā)明內(nèi)容

然而，現(xiàn)有的交互式投影控制方法增加了設(shè)備與硬件成本，不利于交互式投影技術(shù)的普及；并且通過設(shè)置多個(gè)傳感器的方式，在處理數(shù)據(jù)時(shí)需要將各個(gè)傳感器的原始數(shù)據(jù)疊加計(jì)算，通常還需要對(duì)原始數(shù)據(jù)進(jìn)行一定的篩選，從而增加了數(shù)據(jù)處理的復(fù)雜度，不利于快速確定用戶的控制指令。

為此，非常需要一種改進(jìn)的交互式投影控制方法，可以在不增加設(shè)備成本的情況下，對(duì)用戶的控制指令進(jìn)行準(zhǔn)確測(cè)定，并簡(jiǎn)化數(shù)據(jù)處理的過程，以快速確定控制指令，實(shí)時(shí)呈現(xiàn)投影效果。

在本上下文中，本發(fā)明的實(shí)施方式期望提供一種交互式投影控制方法、交互式投影控制裝置、存儲(chǔ)介質(zhì)及電子設(shè)備。

在本發(fā)明實(shí)施方式的第一方面中，提供一種交互式投影控制方法，所述方法包括：采集預(yù)設(shè)物體的當(dāng)前深度圖像；根據(jù)所述當(dāng)前深度圖像確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)；根據(jù)所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)投射與所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)對(duì)應(yīng)的影像。

在本發(fā)明的一些實(shí)施方式中，所述根據(jù)所述當(dāng)前深度圖像確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)包括：根據(jù)所述當(dāng)前深度圖像的深度分布得到所述當(dāng)前深度圖像的法向量特征；將所述當(dāng)前深度圖像的法向量特征與模板進(jìn)行匹配，確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)。

在本發(fā)明的一些實(shí)施方式中，所述根據(jù)所述當(dāng)前深度圖像確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)包括：根據(jù)所述當(dāng)前深度圖像得到所述預(yù)設(shè)物體的當(dāng)前灰度圖像，并根據(jù)所述當(dāng)前灰度圖像的灰度分布得到所述當(dāng)前深度圖像的梯度特征；將所述當(dāng)前深度圖像的梯度特征與所述模板進(jìn)行匹配，確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)。

在本發(fā)明的一些實(shí)施方式中，所述將所述當(dāng)前深度圖像的法向量特征與模板進(jìn)行匹配，確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)包括：根據(jù)所述當(dāng)前深度圖像的法向量特征確定所述當(dāng)前深度圖像與各所述模板的相似度；確定與所述當(dāng)前深度圖像相似度最高的一目標(biāo)模板，并根據(jù)所述目標(biāo)模板確定所述預(yù)設(shè)物體的實(shí)時(shí)姿態(tài)。

在本發(fā)明的一些實(shí)施方式中，所述根據(jù)所述當(dāng)前深度圖像的深度分布得到所述當(dāng)前深度圖像的法向量特征包括：根據(jù)所述當(dāng)前深度圖像中各像素點(diǎn)的深度分布計(jì)算所述當(dāng)前深度圖像中預(yù)設(shè)像素點(diǎn)的法向量方向；將所述預(yù)設(shè)像素點(diǎn)的法向量方向共享至所述預(yù)設(shè)像素點(diǎn)的預(yù)設(shè)鄰域內(nèi)，使所述預(yù)設(shè)鄰域內(nèi)的每個(gè)像素點(diǎn)具有一個(gè)或多個(gè)法向量方向。

在本發(fā)明的一些實(shí)施方式中，所述根據(jù)所述當(dāng)前深度圖像的法向量特征確定所述當(dāng)前深度圖像與各所述模板的相似度包括：利用非極大值抑制算法確定所述當(dāng)前深度圖像與各所述模板的相似度。