[發(fā)明專利]頭戴設(shè)備的圖像處理方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202011146312.5
• 申請(qǐng)日: 2020-10-23
• 公開（公告）號(hào): CN112347870B
• 公開（公告）日: 2023-03-24
• 發(fā)明（設(shè)計(jì)）人: 賈聰聰;姜濱;遲小羽
• 申請(qǐng)（專利權(quán)）人: 歌爾科技有限公司
• 主分類號(hào): G06V40/16
• 分類號(hào): G06V40/16;G06V10/44;G06T7/80;G06T17/00;G06T19/00;G06T7/73
• 代理公司: 北京博雅睿泉專利代理事務(wù)所(特殊普通合伙) 11442
• 代理人: 吳秀娥

本申請(qǐng)公開了一種頭戴設(shè)備的圖像處理方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)。其中，頭戴設(shè)備不同位置上設(shè)置有對(duì)應(yīng)的攝像裝置，方法包括：獲取每一攝像裝置在當(dāng)前時(shí)刻采集到的人臉圖像；對(duì)于任一人臉圖像，提取人臉關(guān)鍵特征點(diǎn)；根據(jù)人臉關(guān)鍵特征點(diǎn)，確定攝像裝置的相機(jī)參數(shù)；根據(jù)人臉圖像和對(duì)應(yīng)相機(jī)參數(shù)，構(gòu)建當(dāng)前時(shí)刻的目標(biāo)人臉三維模型。

技術(shù)領(lǐng)域

本申請(qǐng)涉及圖像處理技術(shù)領(lǐng)域，更具體地，涉及一種頭戴設(shè)備的圖像處理方法、一種頭戴設(shè)備的圖像處理裝置、一種頭戴設(shè)備以及一種計(jì)算機(jī)存儲(chǔ)介質(zhì)。

背景技術(shù)

隨著通訊技術(shù)和互聯(lián)網(wǎng)的發(fā)展，受空間束縛的面對(duì)面社交不再能滿足用戶的需求。為了實(shí)現(xiàn)不受空間束縛的社交，目前提出了一種基于VR的社交方式。

基于VR的社交方式通常為：用戶選擇感興趣的卡通的形象代替自身的形象。或者可掃描用戶身體得到用戶的3D模型，并對(duì)用戶的3D模型進(jìn)行處理得到更符合用戶自身形象的虛擬形象。

但是，基于VR的社交方式得到的虛擬模型不夠逼真，這導(dǎo)致現(xiàn)有的基于VR的社交方式用戶沉浸感低，從而導(dǎo)致用戶體驗(yàn)不佳。

發(fā)明內(nèi)容

本申請(qǐng)的一個(gè)目的是提供一種用于處理頭戴設(shè)備的圖像的新技術(shù)方案。

根據(jù)本申請(qǐng)的第一方面，提供了一種頭戴設(shè)備的圖像處理方法，所述頭戴設(shè)備不同位置上設(shè)置有對(duì)應(yīng)的攝像裝置，所述方法包括：

獲取每一所述攝像裝置在當(dāng)前時(shí)刻采集到的人臉圖像；

對(duì)于任一所述人臉圖像，提取人臉關(guān)鍵特征點(diǎn)；

根據(jù)所述人臉關(guān)鍵特征點(diǎn)，確定所述攝像裝置的相機(jī)參數(shù)；

根據(jù)所述人臉圖像和對(duì)應(yīng)相機(jī)參數(shù)，構(gòu)建所述當(dāng)前時(shí)刻的目標(biāo)人臉三維模型。

可選的，所述方法還包括：

根據(jù)所述目標(biāo)人臉三維模型，生成虛擬形象。

可選的，所述方法還包括：

根據(jù)每一所述攝像裝置采集到人臉圖像，構(gòu)建初始人臉三維模型；

根據(jù)所述初始人臉三維模型，調(diào)整所述目標(biāo)人臉三維模型。

可選的，所述頭戴設(shè)備與人臉上的鼻翼接觸部分設(shè)置有鼻翼輪廓檢測裝置，所述方法還包括：

獲取所述鼻翼輪廓檢測裝置采集到的鼻翼輪廓信息；

根據(jù)所述鼻翼輪廓信息，調(diào)整所述目標(biāo)人臉三維模型中的鼻子三維模型。

可選的，所述鼻翼輪廓檢測裝置包括：柔性彎曲光纖傳感器、光源；其中：

所述柔性彎曲光纖傳感器包括：傳感頭、光電探測器、解調(diào)模塊；

所述柔性彎曲光纖傳感器設(shè)置在所述頭戴設(shè)備與鼻翼接觸位置處，所述光源為所述傳感頭提供光源，所述光電探測器根據(jù)所述傳感頭彎曲調(diào)整的光輸出的光生成的電信號(hào)，所述解調(diào)模塊將所述電信號(hào)轉(zhuǎn)換為反映所述鼻翼輪廓信息的數(shù)字信號(hào)。

可選的，所述對(duì)于任一所述人臉圖像，提取人臉關(guān)鍵特征點(diǎn)，包括：

對(duì)于任一所述人臉圖像，利用尺度不變特征變化算法提取人臉關(guān)鍵特征點(diǎn)。

可選的，所述方法還包括：

獲取歷史人臉三維模型；所述歷史人臉三維模型為在所述當(dāng)前時(shí)刻的前一時(shí)刻構(gòu)建的目標(biāo)人臉三維模型；

根據(jù)所述歷史人臉三維模型，修正所述目標(biāo)人臉三維模型。

可選的，所述攝像裝置為紅外攝像裝置。