日韩在线一区二区三区,日本午夜一区二区三区,国产伦精品一区二区三区四区视频,欧美日韩在线观看视频一区二区三区 ,一区二区视频在线,国产精品18久久久久久首页狼,日本天堂在线观看视频,综合av一区

[發(fā)明專利]一種基于美學(xué)評(píng)價(jià)的帶參考人眼圖像修復(fù)方法有效

專利信息
申請(qǐng)?zhí)枺?/td> 201910065383.3 申請(qǐng)日: 2019-01-23
公開(kāi)(公告)號(hào): CN109919830B 公開(kāi)(公告)日: 2023-02-10
發(fā)明(設(shè)計(jì))人: 顏波;林青;巴合提亞爾·巴熱;譚偉敏 申請(qǐng)(專利權(quán))人: 復(fù)旦大學(xué)
主分類號(hào): G06T3/00 分類號(hào): G06T3/00;G06N3/04;G06N3/08
代理公司: 上海正旦專利代理有限公司 31200 代理人: 陸飛;陸尤
地址: 200433 *** 國(guó)省代碼: 上海;31
權(quán)利要求書(shū): 查看更多 說(shuō)明書(shū): 查看更多
摘要:
搜索關(guān)鍵詞: 一種 基于 美學(xué) 評(píng)價(jià) 參考 圖像 修復(fù) 方法
【權(quán)利要求書(shū)】:

1.一種基于美學(xué)評(píng)價(jià)的帶參考人眼圖像修復(fù)方法,其特征在于,具體步驟如下:

(1)從輸入的待修復(fù)圖像中標(biāo)記出眼睛的位置

通過(guò)人臉關(guān)鍵點(diǎn)的檢測(cè)工具,標(biāo)記出待修復(fù)圖像X的人眼中心點(diǎn)位置(xleft,yleft)和(xright,yright);構(gòu)建一個(gè)與原圖像大小相同的全零矩陣M,以兩個(gè)中心點(diǎn)為圓心,分別構(gòu)造兩個(gè)橢圓形mask,并將矩陣M對(duì)應(yīng)位置置為1;

(2)基于人眼美學(xué)評(píng)價(jià)和人臉結(jié)構(gòu)相似性選擇參考圖像

在待修復(fù)圖像的同一身份的不同圖片中,選擇一張人眼美學(xué)評(píng)價(jià)為高質(zhì)量且與X具有最高結(jié)構(gòu)相似性的圖片作為參考圖像R;

(3)對(duì)參考圖像提取感知特征和眼部位置

用與輸入圖像標(biāo)記眼睛相同的方法,構(gòu)建參考圖像的眼部標(biāo)記矩陣Mr

(4)生成修復(fù)的人臉圖像

將輸入圖像、參考圖像和對(duì)應(yīng)的眼部標(biāo)記共同載入生成器網(wǎng)絡(luò),通過(guò)深度生成器網(wǎng)絡(luò)生成修復(fù)的人臉圖像;其中,生成器網(wǎng)絡(luò)由編碼器、轉(zhuǎn)換器和譯碼器組成;編碼器利用卷積神經(jīng)網(wǎng)絡(luò)從輸入圖像中提取特征,將圖像壓縮成256個(gè)64×64的特征向量;轉(zhuǎn)換器使用6層ResNet模塊,每個(gè)ResNet模塊是由兩個(gè)卷積層構(gòu)成的神經(jīng)網(wǎng)絡(luò)層,用于在轉(zhuǎn)換特征時(shí)保留原始圖像特征;解碼器利用反卷積層完成從特征向量中還原出低級(jí)特征的工作,最終得到生成圖像;

(5)通過(guò)優(yōu)化損失函數(shù)更新生成器、判別器的參數(shù)

在訓(xùn)練中,引入全局判別器、局部判別器和人臉語(yǔ)義解析網(wǎng)絡(luò)來(lái)輔助生成器學(xué)習(xí)人眼修復(fù)任務(wù);判別器作為二值分類器用來(lái)區(qū)分真實(shí)圖像和假圖像;判別器為一種卷積神經(jīng)網(wǎng)絡(luò),從圖像中提取特征,再通過(guò)添加一個(gè)產(chǎn)生一維輸出的卷積層來(lái)確定提取的特征是否屬于特定類別;全局判別器用于確保整個(gè)圖像的真實(shí)性,而局部判別器用于生成修復(fù)局部的細(xì)節(jié);將全局和局部?jī)蓚€(gè)判別器的輸出連接成一個(gè)2048維的向量,通過(guò)一個(gè)全連接層然后用sigmoid函數(shù)得到整體圖像一致性的分?jǐn)?shù);

通過(guò)輸入圖像與修復(fù)圖像之間的重構(gòu)損失計(jì)算生成器參數(shù)的梯度,通過(guò)真實(shí)圖像和生成圖像計(jì)算全局判別器參數(shù)的梯度,通過(guò)真實(shí)圖像和生成圖像的眼部計(jì)算局部判別器參數(shù)的梯度,通過(guò)梯度回傳更新網(wǎng)絡(luò)的參數(shù);

人臉語(yǔ)義解析網(wǎng)絡(luò)是一個(gè)預(yù)先訓(xùn)練好的模型,在訓(xùn)練時(shí)參數(shù)是固定的,通過(guò)真實(shí)圖像和生成圖像的人臉語(yǔ)義分割標(biāo)簽計(jì)算解析損失,促進(jìn)新舊像素之間的語(yǔ)義一致性,使得新生成的照片更真實(shí);在測(cè)試時(shí),網(wǎng)絡(luò)只使用生成器;

人臉語(yǔ)義解析網(wǎng)絡(luò)是一種與語(yǔ)義分割方法有相似之處的全卷積編解碼網(wǎng)絡(luò),使用VGG-16網(wǎng)絡(luò)中的“fc6”層作為編碼器,解碼器由6個(gè)反卷積模塊組成;網(wǎng)絡(luò)共有11個(gè)輸出,對(duì)應(yīng)的分割區(qū)域分別為背景、人臉、左眉毛、右眉毛、左眼、右眼、鼻子、上嘴唇、牙齒、下嘴唇和頭發(fā);將生成圖像的解析結(jié)果與原始圖像的解析結(jié)果進(jìn)行比較,使用Softmax Cross-EntropyLoss作為網(wǎng)絡(luò)的解析損失Lp;解析損失最終被反向傳播到生成器,使得生成器被迫學(xué)習(xí)在哪里生成具有更自然形狀和大小的臉部特征。

2.根據(jù)權(quán)利要求1所述的基于美學(xué)評(píng)價(jià)的帶參考人眼圖像修復(fù)方法,其特征在于,步驟(2)中,人眼美學(xué)評(píng)價(jià)指標(biāo)分為高質(zhì)量與低質(zhì)量?jī)煞N,評(píng)價(jià)網(wǎng)絡(luò)是基于人眼屬性評(píng)測(cè)的深度網(wǎng)絡(luò),網(wǎng)絡(luò)包括3個(gè)卷積模塊、9個(gè)殘差塊和一個(gè)全連接層;每一個(gè)卷積模塊包含1個(gè)卷積層、1個(gè)歸一化層、1個(gè)relu激活層和1個(gè)最大池化層,卷積層的特征圖在池化層的作用下分辨率逐漸減小;網(wǎng)絡(luò)的最終輸出為人眼評(píng)價(jià)的預(yù)測(cè)結(jié)果。

3.根據(jù)權(quán)利要求2所述的基于美學(xué)評(píng)價(jià)的帶參考人眼圖像修復(fù)方法,其特征在于,在CAS-PEAL人臉數(shù)據(jù)集的基礎(chǔ)上,提出一個(gè)新的人眼數(shù)據(jù)集,共1040張人眼圖片;通過(guò)屬性評(píng)分劃分成高質(zhì)量和低質(zhì)量?jī)深惛?00張,評(píng)測(cè)屬性為人眼大小、是否雙眼皮、眼間距和眼睛長(zhǎng)度的關(guān)系、外眥是否高于內(nèi)眥四項(xiàng);訓(xùn)練時(shí)數(shù)據(jù)集平均劃分成5份,進(jìn)行交叉驗(yàn)證。

下載完整專利技術(shù)內(nèi)容需要扣除積分,VIP會(huì)員可以免費(fèi)下載。

該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于復(fù)旦大學(xué),未經(jīng)復(fù)旦大學(xué)許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買(mǎi)此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服

本文鏈接:http://www.szxzyx.cn/pat/books/201910065383.3/1.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專利網(wǎng)。

×

專利文獻(xiàn)下載

說(shuō)明:

1、專利原文基于中國(guó)國(guó)家知識(shí)產(chǎn)權(quán)局專利說(shuō)明書(shū);

2、支持發(fā)明專利 、實(shí)用新型專利、外觀設(shè)計(jì)專利(升級(jí)中);

3、專利數(shù)據(jù)每周兩次同步更新,支持Adobe PDF格式;

4、內(nèi)容包括專利技術(shù)的結(jié)構(gòu)示意圖流程工藝圖技術(shù)構(gòu)造圖

5、已全新升級(jí)為極速版,下載速度顯著提升!歡迎使用!

請(qǐng)您登陸后,進(jìn)行下載,點(diǎn)擊【登陸】 【注冊(cè)】

關(guān)于我們 尋求報(bào)道 投稿須知 廣告合作 版權(quán)聲明 網(wǎng)站地圖 友情鏈接 企業(yè)標(biāo)識(shí) 聯(lián)系我們

鉆瓜專利網(wǎng)在線咨詢

周一至周五 9:00-18:00

咨詢?cè)诰€客服咨詢?cè)诰€客服
tel code back_top
主站蜘蛛池模板: 视频一区欧美| 国产精品视频二区不卡| 年轻bbwbbw高潮| 日韩精品在线一区二区三区| 蜜臀久久99精品久久久久久网站| 日本一区二区三区免费在线| 欧美视屏一区| 欧洲精品一区二区三区久久| 欧美精品一区二区三区四区在线| 蜜臀久久久久久999| 中文字幕一区三区| 国产91视频一区| 亚洲精品一区二区三区香蕉| 草逼视频网站| 狠狠躁狠狠躁视频专区| 久久99精品国产99久久6男男| xxxx18日本护士高清hd| 综合久久一区二区三区| 久久精品视频3| 国产精品欧美日韩在线| 国产乱码精品一区二区三区中文| 午夜毛片在线| 国产精品电影免费观看| 国产一区二区视频免费观看| 在线国产91| 大桥未久黑人强制中出| 午夜色影院| 欧美精品日韩精品| 久久亚洲精品国产日韩高潮| 久久精品国产亚| 精品久久久久久久免费看女人毛片| 日韩精品免费一区二区在线观看| 国产色婷婷精品综合在线播放| 亚洲精品久久久久中文字幕欢迎你| 91国产在线看| 欧美午夜理伦三级在线观看偷窥| 一区二区中文字幕在线观看| 日韩av免费网站| 亚洲精品日日夜夜| 91精品国产综合久久国产大片| yy6080影院旧里番乳色吐息| 久久噜噜少妇网站| 国产三级在线视频一区二区三区| 国产一区二区精品免费| 91久久精品在线| 午夜电影毛片| 国产精品一二三区视频网站| 国产欧美日韩一区二区三区四区| 中文字幕一区二区在线播放| 91精品久久久久久| 一区二区午夜| 91精品一区| 久久噜噜少妇网站| 欧美hdfree性xxxx| 黄色香港三级三级三级| 国产精品一二三区视频网站| 美女张开腿黄网站免费| 日本一区二区三区在线看| 日韩精品中文字幕在线| 久久97国产| 91麻豆精品一区二区三区| 国产高清在线一区| 国产午夜三级一二三区| 欧美日韩国产123| 91麻豆精品国产91久久久资源速度| 国产一区免费在线观看| 国产日韩欧美第一页| 女女百合互慰av| 国产免费观看一区| 中文字幕一区二区三区免费视频| 精品久久香蕉国产线看观看gif| 久久不卡一区| 欧美大片一区二区三区| 国产精品久久久av久久久| 国产精品日韩精品欧美精品| 久久九精品| 在线精品国产一区二区三区88| 日韩精品免费一区二区在线观看| 色妞www精品视频| 偷拍精品一区二区三区| 国内偷拍一区| 欧美久久一区二区三区| 91日韩一区二区三区| 伊人av综合网| 91麻豆精品国产91久久久更新资源速度超快| 久久精品一| 国产女人好紧好爽| 夜夜躁狠狠躁日日躁2024| 91一区二区三区久久国产乱| 精品欧美一区二区精品久久小说| 欧美激情精品久久久久久免费| 日韩电影在线一区二区三区| 欧美极品少妇videossex| 久久99国产精品久久99果冻传媒新版本| 国产精品一区二区久久乐夜夜嗨| 亚洲福利视频二区| 午夜大片网| 色狠狠色狠狠综合| 少妇性色午夜淫片aaa播放5| 国产欧美精品一区二区在线播放| 欧美在线免费观看一区| 亚洲国产精品综合| 欧美一级片一区| 男人的天堂一区二区| 亚洲乱码一区二区三区三上悠亚 | 亚洲乱在线| 国产午夜精品一区理论片飘花 | 麻豆精品久久久| 国产乱人乱精一区二视频国产精品| 午夜电影三级| 中文在线√天堂| 欧美精品xxxxx| 亚洲精品国产久| 亚洲精品一区在线| 国产精品乱码一区二区三区四川人| 日韩欧美高清一区| 日本午夜精品一区二区三区| 亚洲国产精品一区在线| 中文字幕日本精品一区二区三区| 国产高清在线观看一区| 久久久久亚洲精品视频| 91精品一区二区中文字幕| 亚洲欧洲日韩av| 午夜片在线| 热re99久久精品国99热蜜月| aaaaa国产欧美一区二区| 精品国产乱码一区二区三区在线| 国产一级大片| 亚洲欧洲一区二区| 午夜黄色一级电影| 男人的天堂一区二区| 国产亚洲精品久久久久动| 在线国产精品一区二区| 99精品欧美一区二区三区美图| 91制服诱惑| 国产伦精品一区二区三区无广告| 欧美国产亚洲精品| av国产精品毛片一区二区小说| 成年人性生活免费看| 99国产精品一区| 99国产精品久久久久99打野战| 综合久久一区| 国产精品9区| 国产乱人激情h在线观看| 一区二区三区欧美日韩| 欧美精品免费视频| 久久精品国产99| 久久二区视频| av中文字幕一区二区| 亚洲乱亚洲乱妇28p| 大伊人av| 中文字幕欧美久久日高清| 欧美日韩国产精品一区二区| 国产极品美女高潮无套久久久| 97人人澡人人爽91综合色| 国产三级在线视频一区二区三区| 亚洲区在线| 国产日韩麻豆| 欧美色图视频一区| 久久久久久久国产精品视频| 国产午夜精品一区理论片飘花| 亚洲国产一区二区久久久777| 国产精品亚发布| 欧美日韩一区二区三区69堂| 国产一区免费在线观看| 国产99久久久精品视频| 欧美资源一区| 日本精品一区二区三区视频| 国产一区激情| 少妇在线看www| 亚洲欧美一卡二卡| 久久一区二区精品| 爱看av在线入口| 国产日韩欧美一区二区在线播放| 欧美黑人巨大久久久精品一区| 国产69精品久久久久999天美| 国产精品美乳在线观看| 亚洲美女在线一区| 性国产日韩欧美一区二区在线| 91国偷自产一区二区介绍| 欧美一区二区三区久久精品| 精品一区二区超碰久久久| 中文字幕一区二区三区又粗| 国产二区不卡| 91久久国语露脸精品国产高跟| 欧美一区二区三区爽大粗免费| av午夜在线| 日本一级中文字幕久久久久久| 亚洲欧美v国产一区二区| 国产韩国精品一区二区三区| 伊人av中文av狼人av| 久久国产精品网站| 久久精品99国产精品亚洲最刺激| 精品999久久久| 国产精品亚洲第一区| 久久不卡精品| 91精品国产影片一区二区三区| 欧美精选一区二区三区| 日韩精品免费一区二区中文字幕| xxxx18日本护士高清hd| 国产在线拍偷自揄拍视频| 午夜毛片影院| 视频二区狠狠色视频| 亚洲久色影视| 亚洲欧美色图在线| freexxxxxxx| 日韩中文字幕一区二区在线视频| 国久久久久久| 日韩精品少妇一区二区在线看| 美日韩一区| 91精品国产一区二区三区| 国产乱人乱精一区二视频国产精品| 精品久久久久久中文字幕大豆网| 久99精品| 国产精品日本一区二区不卡视频 | 中文字幕一区2区3区| 欧美在线播放一区| 国产欧美视频一区二区| 国产高潮国产高潮久久久91| 国产一区二| 国产色婷婷精品综合在线播放 | 久久精品亚洲精品| 国产偷亚洲偷欧美偷精品| 国产女人好紧好爽| 久久婷婷国产香蕉| 精品国产亚洲一区二区三区| 久久精品国产久精国产| 欧美精品日韩精品| 国产一级不卡视频| 欧美一区二三区| 久久亚洲精品国产一区最新章节| 电影午夜精品一区二区三区| 女女百合互慰av| 欧美精品日韩精品| 国产视频一区二区视频| 制服.丝袜.亚洲.另类.中文| 国产精品偷拍| 午夜毛片在线看| 国91精品久久久久9999不卡| 亚洲一二三四区| 欧美日韩国产免费观看| 久久久久久久久亚洲精品一牛| 国产一级自拍| 激情久久一区二区| 国产91在线播放| 午夜色影院|