[發(fā)明專利]一種vr眼鏡面部3d圖像、平面圖像捕獲與手勢(shì)捕獲系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201710440211.0
• 申請(qǐng)日: 2017-06-12
• 公開(kāi)（公告）號(hào): CN107491165A
• 公開(kāi)（公告）日: 2017-12-19
• 發(fā)明（設(shè)計(jì)）人: 張翔宇
• 申請(qǐng)（專利權(quán)）人: 張翔宇
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06F1/16
• 代理公司: 暫無(wú)信息
• 代理人: 暫無(wú)信息

技術(shù)領(lǐng)域

本發(fā)明涉及一種虛擬現(xiàn)實(shí)設(shè)備系統(tǒng)，具體地說(shuō)涉及一種通過(guò)vr眼鏡完成遠(yuǎn)程可視化交互的系統(tǒng)。

背景技術(shù)

vr虛擬現(xiàn)實(shí)設(shè)備的熱賣由此誕生了一個(gè)問(wèn)題步入兩個(gè)人如何用vr設(shè)備通過(guò)圖像實(shí)施互動(dòng)、互傳，問(wèn)題在于vr設(shè)備通常設(shè)置面部導(dǎo)致遮擋面部難以通過(guò)外部攝像頭捕捉人的面部整體圖像并如何同時(shí)完成交互互動(dòng)。

發(fā)明目的在于vr設(shè)備通常設(shè)置面部導(dǎo)致遮擋面部難以通過(guò)外部攝像頭捕捉人的面部整體圖像，本發(fā)明致力于解決這一問(wèn)題。

一種vr眼鏡面部3d圖像、平面圖像捕獲與手勢(shì)捕獲系統(tǒng)，包括：攝像頭組，vr眼鏡，其特征在于：先提供一張正面頭像，陣列攝像頭組捕獲整個(gè)面部圖像，vr眼鏡由于覆蓋并緊貼面部，緊貼面部區(qū)域（18）畫(huà)面無(wú)法獲取，由此前提供的面部照片中對(duì)應(yīng)部位進(jìn)行補(bǔ)充；

vr眼鏡緊貼面部區(qū)域（18）的面部接觸部件顏色是綠色或藍(lán)色二者選其一；

通過(guò)攝像頭陣列組獲取vr眼鏡貼合面部外部邊緣線（17）、內(nèi)部邊緣線（16），兩條線確定二者之間的區(qū)域（18）輪廓，根據(jù)圖片圖與圖的對(duì)應(yīng)點(diǎn)包括下頜、眼睛、瞳孔、嘴巴特征點(diǎn)確定兩個(gè)圖像的位置相對(duì)應(yīng)關(guān)系，其中前者是攝像頭陣列組捕獲的面部圖像，后者是提供的正面頭像圖像；從后者圖像中裁切前者兩條線確定二者之間的區(qū)域（18）中對(duì)應(yīng)在后者圖像的局部區(qū)域圖像，并將其補(bǔ)充到前者圖像中，因?yàn)樵搮^(qū)域在面部一般表情中保持靜態(tài)，將此區(qū)域靜態(tài)面部圖像與其它部位動(dòng)態(tài)視頻按照位置對(duì)應(yīng)關(guān)系結(jié)合，合二為一成為完成動(dòng)態(tài)視頻面部；

攝像頭a（1）、攝像頭b（10）設(shè)置于對(duì)應(yīng)左眼位置的vr眼鏡的內(nèi)部區(qū)域，攝像頭a（1）、攝像頭b（10）位于透鏡鏡片a（6）上、下兩側(cè)設(shè)置，紅外攝像頭朝向眼球瞳孔位置設(shè)置，紅外攝像頭b（3）設(shè)置于左眼對(duì)應(yīng)透鏡鏡片（6）邊緣；

攝像頭a1（2）、攝像頭b2（9）設(shè)置于對(duì)應(yīng)左眼位置的vr眼鏡內(nèi)部區(qū)域，攝像頭a1（2）、攝像頭b1（9）位于透鏡鏡片c（7）上、下兩側(cè)設(shè)置，紅外攝像頭朝向眼球瞳孔位置設(shè)置，紅外攝像頭b1（8）設(shè)置于右眼對(duì)應(yīng)透鏡鏡片c（7）邊緣；

vr眼鏡下側(cè)邊框（11）緊鄰邊緣（5）處設(shè)置攝像頭c（4）攝像頭d（12），攝像頭c（4）、攝像頭d（12）沿左右間的中心點(diǎn)位置對(duì)稱設(shè)置，捕獲圖像方向朝向面部；

vr眼鏡上側(cè)邊框（15）緊鄰邊緣（14）處設(shè)置攝像頭f（23），上側(cè)邊框（15）邊緣（14）上面沿左右對(duì)稱點(diǎn)處設(shè)置攝像頭f（23），其捕獲圖像方向朝向面部；

以上設(shè)備根據(jù)攝像頭設(shè)置在面部位置對(duì)應(yīng)，拼合其捕獲圖像，拼接成完整面部，完成了完整面部圖像的捕獲，具體是：

攝像頭a（1）、攝像頭b（10）捕獲vr眼鏡內(nèi)部的眼睛鼻梁區(qū)域圖像，

攝像頭a1（2）、攝像頭b2（9）捕獲vr眼鏡內(nèi)部的眼睛鼻梁區(qū)域圖像，

紅外攝像頭b（3）紅外攝像頭b1（8）負(fù)責(zé)，

攝像頭c（4）、攝像頭d（12）捕獲頭戴vr眼鏡狀態(tài)下人的面部區(qū)域vr眼鏡以下部位圖像，

攝像頭f（23）捕獲額頭圖像，

攝像頭c（4）、攝像頭d（12）捕獲頭戴vr眼鏡狀態(tài)下人的面部區(qū)域vr眼鏡以下部位圖像，

并將攝像頭c（4）、攝像頭d（12）捕獲頭戴vr眼鏡狀態(tài)下人的面部區(qū)域vr眼鏡以下部位圖像，裁切出的對(duì)應(yīng)此被覆蓋部位的面部區(qū)域圖像，vr眼鏡貼合面部的內(nèi)部邊緣線（16）以內(nèi)的由攝像頭a（1）、攝像頭b（10）捕獲vr眼鏡內(nèi)部的眼睛鼻梁區(qū)域圖像，攝像頭a1（2）、攝像頭b2（9）捕獲vr眼鏡內(nèi)部的眼睛鼻梁區(qū)域圖像，在拼合攝像頭f（23）捕獲額頭圖像而將以上局部動(dòng)態(tài)圖像拼合一體后合成完整面部圖像，再計(jì)算機(jī)生成耳朵、頭發(fā)以及脖子對(duì)應(yīng)與面部圖像進(jìn)行拼接，最終合成完整頭像，頭像結(jié)合有計(jì)算機(jī)合成的圖像部分包括頭發(fā)、耳朵、脖子合成具有完全頭部器官的完整頭像，眼鏡上設(shè)置可以測(cè)量頭部旋轉(zhuǎn)角度的3軸角度即位置變化捕獲傳感器；

最終顯示到vr眼鏡左眼、右眼屏幕上或顯示器上，可以通過(guò)網(wǎng)絡(luò)遠(yuǎn)程連接傳送到遠(yuǎn)方的vr眼鏡的左眼、右眼的屏幕；