[發(fā)明專(zhuān)利]一種虛擬圖像細(xì)節(jié)處理的方法

在審

• 申請(qǐng)?zhí)枺?/td>: 202011090569.3
• 申請(qǐng)日: 2020-10-13
• 公開(kāi)（公告）號(hào): CN112215949A
• 公開(kāi)（公告）日: 2021-01-12
• 發(fā)明（設(shè)計(jì)）人: 羅雯婧
• 申請(qǐng)（專(zhuān)利權(quán)）人: 深圳市齊天智能方案設(shè)計(jì)有限公司
• 主分類(lèi)號(hào): G06T17/00
• 分類(lèi)號(hào): G06T17/00;G06T3/60;G06T7/11;G06T7/90
• 代理公司: 廣東中科華海知識(shí)產(chǎn)權(quán)代理有限公司 44668
• 代理人: 陳春艷

本發(fā)明公開(kāi)了一種虛擬圖像細(xì)節(jié)處理的方法，包括：從ARCore系統(tǒng)存儲(chǔ)模塊中調(diào)用對(duì)應(yīng)圖片掃描后構(gòu)建的3D模型場(chǎng)景；調(diào)取相機(jī)源中的識(shí)別涂畫(huà)卡，并通過(guò)手機(jī)捕獲功能捕獲識(shí)別涂畫(huà)卡的四個(gè)邊角，獲取涂畫(huà)卡的輪廓，并將四個(gè)角用于數(shù)學(xué)矩陣中；將所述涂畫(huà)卡的輪廓通過(guò)OpenCV軟件進(jìn)行投射反轉(zhuǎn)處理。本發(fā)明通過(guò)對(duì)將涂畫(huà)卡的輪廓通過(guò)OpenCV軟件進(jìn)行投射反轉(zhuǎn)處理后與3D模擬場(chǎng)景中的平面紋理對(duì)應(yīng)，并通過(guò)紫外線映射技術(shù)，使涂畫(huà)卡與模型部位對(duì)應(yīng)，使用畫(huà)筆工具去涂色繪畫(huà)的時(shí)候就可以精準(zhǔn)地將顏色涂在想要的部位上面，且改變相應(yīng)的顏色，有效的解決了涂色不精準(zhǔn)和透視錯(cuò)誤的問(wèn)題。

技術(shù)領(lǐng)域

本發(fā)明涉及一種圖像細(xì)節(jié)處理方法，特別涉及一種虛擬圖像細(xì)節(jié)處理的方法，屬于計(jì)算機(jī)技術(shù)領(lǐng)域。

背景技術(shù)

市面上一些同類(lèi)的AR繪本是以3D掃描和3D投射的方式進(jìn)行畫(huà)面的展現(xiàn)和上色，讓孩子在互動(dòng)游戲中學(xué)習(xí)，從而全方位開(kāi)發(fā)兒童大腦，但是這類(lèi)產(chǎn)品的模型大多都不會(huì)那么精細(xì)，有一定的局限性，在涂色方面，由于其他AR繪本都是以3D投射的方式進(jìn)行UV投射，即對(duì)畫(huà)面中看到的模型進(jìn)行涂色，其缺點(diǎn)是由于模型是3D的，在不同的角度會(huì)存在不同的透視角度，因此畫(huà)出的東西就不能以一個(gè)正確的透視呈現(xiàn)在物體上，導(dǎo)致虛擬圖像的細(xì)節(jié)處理不到位。

發(fā)明內(nèi)容

本發(fā)明的目的在于提供一種虛擬圖像細(xì)節(jié)處理的方法，以解決上述背景技術(shù)中提出的由于其他AR繪本都是以3D投射的方式進(jìn)行UV投射，即對(duì)畫(huà)面中看到的模型進(jìn)行涂色，其缺點(diǎn)是由于模型是3D的，在不同的角度會(huì)存在不同的透視角度，因此畫(huà)出的東西就不能以一個(gè)正確的透視呈現(xiàn)在物體上，導(dǎo)致虛擬圖像的細(xì)節(jié)處理不到位的問(wèn)題。

為實(shí)現(xiàn)上述目的，本發(fā)明提供如下技術(shù)方案：包括以下步驟：

從ARCore系統(tǒng)存儲(chǔ)模塊中調(diào)用對(duì)應(yīng)圖片掃描后構(gòu)建的3D模型場(chǎng)景；

調(diào)取相機(jī)源中的識(shí)別涂畫(huà)卡，并通過(guò)手機(jī)捕獲功能捕獲識(shí)別涂畫(huà)卡的四個(gè)邊角，獲取涂畫(huà)卡的輪廓，并將四個(gè)角用于數(shù)學(xué)矩陣中；

將所述涂畫(huà)卡的輪廓通過(guò)OpenCV軟件進(jìn)行投射反轉(zhuǎn)處理，確定涂畫(huà)卡的輪廓尺寸與3D模型對(duì)應(yīng)模型成映射關(guān)系；

將所述涂畫(huà)卡輪廓移動(dòng)至調(diào)取3D模型場(chǎng)景中的對(duì)應(yīng)平面紋理中；

對(duì)涂畫(huà)卡的部位進(jìn)行涂色，通過(guò)紫外線將對(duì)應(yīng)部位映射到模型對(duì)應(yīng)部位并產(chǎn)生相應(yīng)的顏色變化，并觀察顏色變化的像素點(diǎn)，確定涂畫(huà)位置精確。

其中，所述調(diào)用3D模型場(chǎng)景包括：通過(guò)外接顯示設(shè)備發(fā)送調(diào)用3D模擬場(chǎng)景請(qǐng)求，ARCore系統(tǒng)對(duì)顯示設(shè)備發(fā)送的請(qǐng)求進(jìn)行處理，并在存儲(chǔ)數(shù)據(jù)庫(kù)中篩選請(qǐng)求所需的3D模型場(chǎng)景，并通過(guò)接口發(fā)送至顯示設(shè)備進(jìn)行顯示。

其中，所述數(shù)學(xué)矩陣是由多個(gè)像素點(diǎn)排列制成。

其中，將所述涂畫(huà)卡輪廓移動(dòng)至調(diào)取3D模型場(chǎng)景中的對(duì)應(yīng)平面紋理中包括：

從相機(jī)饋送復(fù)制圖像，調(diào)取并復(fù)制所需的電子照片；

對(duì)復(fù)制的圖像進(jìn)行裁剪修身處理，對(duì)復(fù)制副本的圖像通過(guò)修剪工具進(jìn)行裁剪和修理；

對(duì)修飾后的圖像進(jìn)行執(zhí)行透視矯正處理。

其中，在將對(duì)應(yīng)部位映射到模型對(duì)應(yīng)部位并產(chǎn)生相應(yīng)的顏色變化后，照相機(jī)對(duì)涂畫(huà)部位進(jìn)行實(shí)時(shí)的攝像，通過(guò)照相機(jī)內(nèi)部設(shè)有的拾色模塊對(duì)涂畫(huà)部位進(jìn)行拾色，拾色產(chǎn)生的RGB三原色信息傳輸至計(jì)算機(jī)，通過(guò)計(jì)算機(jī)處理就對(duì)3D模型映射部位進(jìn)行上色。

其中，所述對(duì)圖像進(jìn)行透視矯正處理包括：

圖像透視：首先找到圖片的輪廓，然后按照從大小的順序排列，排好之后通過(guò)排序方法找出最大的四個(gè)點(diǎn)，然后四點(diǎn)透視變換獲得圖片的二維圖，完成透視工作；