[發(fā)明專利]頭戴設(shè)備的圖像處理方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202011146312.5
• 申請(qǐng)日: 2020-10-23
• 公開（公告）號(hào): CN112347870B
• 公開（公告）日: 2023-03-24
• 發(fā)明（設(shè)計(jì)）人: 賈聰聰;姜濱;遲小羽
• 申請(qǐng)（專利權(quán)）人: 歌爾科技有限公司
• 主分類號(hào): G06V40/16
• 分類號(hào): G06V40/16;G06V10/44;G06T7/80;G06T17/00;G06T19/00;G06T7/73
• 代理公司: 北京博雅睿泉專利代理事務(wù)所(特殊普通合伙) 11442
• 代理人: 吳秀娥

1.一種頭戴設(shè)備的圖像處理方法，其特征在于，所述頭戴設(shè)備不同位置上設(shè)置有對(duì)應(yīng)的攝像裝置，所述方法包括：

獲取每一所述攝像裝置在當(dāng)前時(shí)刻采集到的人臉圖像；

對(duì)于任一所述人臉圖像，提取人臉關(guān)鍵特征點(diǎn)；

根據(jù)所述人臉關(guān)鍵特征點(diǎn)，確定所述攝像裝置的相機(jī)參數(shù)；

根據(jù)所述人臉圖像和對(duì)應(yīng)相機(jī)參數(shù)，構(gòu)建所述當(dāng)前時(shí)刻的目標(biāo)人臉三維模型；

其中，所述頭戴設(shè)備與人臉上的鼻翼接觸部分設(shè)置有鼻翼輪廓檢測(cè)裝置，所述方法還包括：

獲取所述鼻翼輪廓檢測(cè)裝置采集到的鼻翼輪廓信息；

根據(jù)所述鼻翼輪廓信息，調(diào)整所述目標(biāo)人臉三維模型中的鼻子三維模型；

所述鼻翼輪廓檢測(cè)裝置包括：柔性彎曲光纖傳感器、光源；其中：

所述柔性彎曲光纖傳感器包括：傳感頭、光電探測(cè)器、解調(diào)模塊；

所述柔性彎曲光纖傳感器設(shè)置在所述頭戴設(shè)備與鼻翼接觸位置處，所述光源為所述傳感頭提供光源，所述光電探測(cè)器根據(jù)所述傳感頭彎曲調(diào)整的光輸出的光生成的電信號(hào)，所述解調(diào)模塊將所述電信號(hào)轉(zhuǎn)換為反映所述鼻翼輪廓信息的數(shù)字信號(hào)。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

根據(jù)所述目標(biāo)人臉三維模型，生成虛擬形象。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

根據(jù)每一所述攝像裝置采集到人臉圖像，構(gòu)建初始人臉三維模型；

根據(jù)所述初始人臉三維模型，調(diào)整所述目標(biāo)人臉三維模型。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)于任一所述人臉圖像，提取人臉關(guān)鍵特征點(diǎn)，包括：

對(duì)于任一所述人臉圖像，利用尺度不變特征變化算法提取人臉關(guān)鍵特征點(diǎn)。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

獲取歷史人臉三維模型；所述歷史人臉三維模型為在所述當(dāng)前時(shí)刻的前一時(shí)刻構(gòu)建的目標(biāo)人臉三維模型；

根據(jù)所述歷史人臉三維模型，修正所述目標(biāo)人臉三維模型。

6.一種頭戴設(shè)備的圖像處理裝置，其特征在于，所述頭戴設(shè)備不同位置上設(shè)置有對(duì)應(yīng)的攝像裝置，所述圖像處理裝置包括：

獲取模塊，用于獲取每一所述攝像裝置采集到的人臉圖像；

提取模塊，用于對(duì)于任一所述人臉圖像，提取人臉關(guān)鍵特征點(diǎn)；

確定模塊，根據(jù)所述人臉關(guān)鍵特征點(diǎn)，確定所述攝像裝置的相機(jī)參數(shù)；

構(gòu)建模塊，用于根據(jù)根據(jù)所述人臉圖像和對(duì)應(yīng)相機(jī)參數(shù)，構(gòu)建所述當(dāng)前時(shí)刻的目標(biāo)人臉三維模型；

其中，所述頭戴設(shè)備與人臉上的鼻翼接觸部分設(shè)置有鼻翼輪廓檢測(cè)裝置，所述獲取模塊還用于：

獲取所述鼻翼輪廓檢測(cè)裝置采集到的鼻翼輪廓信息；

所述調(diào)整模塊，還用于根據(jù)所述鼻翼輪廓信息，調(diào)整所述目標(biāo)人臉三維模型中的鼻子三維模型；

所述鼻翼輪廓檢測(cè)裝置包括：柔性彎曲光纖傳感器、光源；其中：

所述柔性彎曲光纖傳感器包括：傳感頭、光電探測(cè)器、解調(diào)模塊；

所述柔性彎曲光纖傳感器設(shè)置在所述頭戴設(shè)備與鼻翼接觸位置處，所述光源為所述傳感頭提供光源，所述光電探測(cè)器根據(jù)所述傳感頭彎曲調(diào)整的光輸出的光生成的電信號(hào)，所述解調(diào)模塊將所述電信號(hào)轉(zhuǎn)換為反映所述鼻翼輪廓信息的數(shù)字信號(hào)。

7.一種頭戴設(shè)備，其特征在于，所述頭戴設(shè)備不同位置上設(shè)置有對(duì)應(yīng)的攝像裝置，包括如權(quán)利要求6所述的裝置；或者，

包括存儲(chǔ)器和處理器，所述存儲(chǔ)器用于存儲(chǔ)計(jì)算機(jī)指令，所述處理器用于從所述存儲(chǔ)器中調(diào)用所述計(jì)算機(jī)指令，以執(zhí)行如權(quán)利要求1-5中任一項(xiàng)所述的方法。

8.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，其上存儲(chǔ)有計(jì)算機(jī)程序，所述計(jì)算機(jī)程序在被處理器執(zhí)行時(shí)實(shí)現(xiàn)根據(jù)權(quán)利要求1-5中任一項(xiàng)所述的方法。