日韩在线一区二区三区,日本午夜一区二区三区,国产伦精品一区二区三区四区视频,欧美日韩在线观看视频一区二区三区 ,一区二区视频在线,国产精品18久久久久久首页狼,日本天堂在线观看视频,综合av一区

[發(fā)明專利]一種基于美學(xué)評價的帶參考人眼圖像修復(fù)方法有效

專利信息
申請?zhí)枺?/td> 201910065383.3 申請日: 2019-01-23
公開(公告)號: CN109919830B 公開(公告)日: 2023-02-10
發(fā)明(設(shè)計)人: 顏波;林青;巴合提亞爾·巴熱;譚偉敏 申請(專利權(quán))人: 復(fù)旦大學(xué)
主分類號: G06T3/00 分類號: G06T3/00;G06N3/04;G06N3/08
代理公司: 上海正旦專利代理有限公司 31200 代理人: 陸飛;陸尤
地址: 200433 *** 國省代碼: 上海;31
權(quán)利要求書: 查看更多 說明書: 查看更多
摘要:
搜索關(guān)鍵詞: 一種 基于 美學(xué) 評價 參考 圖像 修復(fù) 方法
【權(quán)利要求書】:

1.一種基于美學(xué)評價的帶參考人眼圖像修復(fù)方法,其特征在于,具體步驟如下:

(1)從輸入的待修復(fù)圖像中標(biāo)記出眼睛的位置

通過人臉關(guān)鍵點的檢測工具,標(biāo)記出待修復(fù)圖像X的人眼中心點位置(xleft,yleft)和(xright,yright);構(gòu)建一個與原圖像大小相同的全零矩陣M,以兩個中心點為圓心,分別構(gòu)造兩個橢圓形mask,并將矩陣M對應(yīng)位置置為1;

(2)基于人眼美學(xué)評價和人臉結(jié)構(gòu)相似性選擇參考圖像

在待修復(fù)圖像的同一身份的不同圖片中,選擇一張人眼美學(xué)評價為高質(zhì)量且與X具有最高結(jié)構(gòu)相似性的圖片作為參考圖像R;

(3)對參考圖像提取感知特征和眼部位置

用與輸入圖像標(biāo)記眼睛相同的方法,構(gòu)建參考圖像的眼部標(biāo)記矩陣Mr

(4)生成修復(fù)的人臉圖像

將輸入圖像、參考圖像和對應(yīng)的眼部標(biāo)記共同載入生成器網(wǎng)絡(luò),通過深度生成器網(wǎng)絡(luò)生成修復(fù)的人臉圖像;其中,生成器網(wǎng)絡(luò)由編碼器、轉(zhuǎn)換器和譯碼器組成;編碼器利用卷積神經(jīng)網(wǎng)絡(luò)從輸入圖像中提取特征,將圖像壓縮成256個64×64的特征向量;轉(zhuǎn)換器使用6層ResNet模塊,每個ResNet模塊是由兩個卷積層構(gòu)成的神經(jīng)網(wǎng)絡(luò)層,用于在轉(zhuǎn)換特征時保留原始圖像特征;解碼器利用反卷積層完成從特征向量中還原出低級特征的工作,最終得到生成圖像;

(5)通過優(yōu)化損失函數(shù)更新生成器、判別器的參數(shù)

在訓(xùn)練中,引入全局判別器、局部判別器和人臉語義解析網(wǎng)絡(luò)來輔助生成器學(xué)習(xí)人眼修復(fù)任務(wù);判別器作為二值分類器用來區(qū)分真實圖像和假圖像;判別器為一種卷積神經(jīng)網(wǎng)絡(luò),從圖像中提取特征,再通過添加一個產(chǎn)生一維輸出的卷積層來確定提取的特征是否屬于特定類別;全局判別器用于確保整個圖像的真實性,而局部判別器用于生成修復(fù)局部的細節(jié);將全局和局部兩個判別器的輸出連接成一個2048維的向量,通過一個全連接層然后用sigmoid函數(shù)得到整體圖像一致性的分數(shù);

通過輸入圖像與修復(fù)圖像之間的重構(gòu)損失計算生成器參數(shù)的梯度,通過真實圖像和生成圖像計算全局判別器參數(shù)的梯度,通過真實圖像和生成圖像的眼部計算局部判別器參數(shù)的梯度,通過梯度回傳更新網(wǎng)絡(luò)的參數(shù);

人臉語義解析網(wǎng)絡(luò)是一個預(yù)先訓(xùn)練好的模型,在訓(xùn)練時參數(shù)是固定的,通過真實圖像和生成圖像的人臉語義分割標(biāo)簽計算解析損失,促進新舊像素之間的語義一致性,使得新生成的照片更真實;在測試時,網(wǎng)絡(luò)只使用生成器;

人臉語義解析網(wǎng)絡(luò)是一種與語義分割方法有相似之處的全卷積編解碼網(wǎng)絡(luò),使用VGG-16網(wǎng)絡(luò)中的“fc6”層作為編碼器,解碼器由6個反卷積模塊組成;網(wǎng)絡(luò)共有11個輸出,對應(yīng)的分割區(qū)域分別為背景、人臉、左眉毛、右眉毛、左眼、右眼、鼻子、上嘴唇、牙齒、下嘴唇和頭發(fā);將生成圖像的解析結(jié)果與原始圖像的解析結(jié)果進行比較,使用Softmax Cross-EntropyLoss作為網(wǎng)絡(luò)的解析損失Lp;解析損失最終被反向傳播到生成器,使得生成器被迫學(xué)習(xí)在哪里生成具有更自然形狀和大小的臉部特征。

2.根據(jù)權(quán)利要求1所述的基于美學(xué)評價的帶參考人眼圖像修復(fù)方法,其特征在于,步驟(2)中,人眼美學(xué)評價指標(biāo)分為高質(zhì)量與低質(zhì)量兩種,評價網(wǎng)絡(luò)是基于人眼屬性評測的深度網(wǎng)絡(luò),網(wǎng)絡(luò)包括3個卷積模塊、9個殘差塊和一個全連接層;每一個卷積模塊包含1個卷積層、1個歸一化層、1個relu激活層和1個最大池化層,卷積層的特征圖在池化層的作用下分辨率逐漸減小;網(wǎng)絡(luò)的最終輸出為人眼評價的預(yù)測結(jié)果。

3.根據(jù)權(quán)利要求2所述的基于美學(xué)評價的帶參考人眼圖像修復(fù)方法,其特征在于,在CAS-PEAL人臉數(shù)據(jù)集的基礎(chǔ)上,提出一個新的人眼數(shù)據(jù)集,共1040張人眼圖片;通過屬性評分劃分成高質(zhì)量和低質(zhì)量兩類各500張,評測屬性為人眼大小、是否雙眼皮、眼間距和眼睛長度的關(guān)系、外眥是否高于內(nèi)眥四項;訓(xùn)練時數(shù)據(jù)集平均劃分成5份,進行交叉驗證。

下載完整專利技術(shù)內(nèi)容需要扣除積分,VIP會員可以免費下載。

該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于復(fù)旦大學(xué),未經(jīng)復(fù)旦大學(xué)許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服

本文鏈接:http://www.szxzyx.cn/pat/books/201910065383.3/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。

×

專利文獻下載

說明:

1、專利原文基于中國國家知識產(chǎn)權(quán)局專利說明書;

2、支持發(fā)明專利 、實用新型專利、外觀設(shè)計專利(升級中);

3、專利數(shù)據(jù)每周兩次同步更新,支持Adobe PDF格式;

4、內(nèi)容包括專利技術(shù)的結(jié)構(gòu)示意圖流程工藝圖技術(shù)構(gòu)造圖

5、已全新升級為極速版,下載速度顯著提升!歡迎使用!

請您登陸后,進行下載,點擊【登陸】 【注冊】

關(guān)于我們 尋求報道 投稿須知 廣告合作 版權(quán)聲明 網(wǎng)站地圖 友情鏈接 企業(yè)標(biāo)識 聯(lián)系我們

鉆瓜專利網(wǎng)在線咨詢

周一至周五 9:00-18:00

咨詢在線客服咨詢在線客服
tel code back_top
主站蜘蛛池模板: 亚洲欧洲日韩av| 久久精品男人的天堂| 亚洲美女在线一区| 欧美日韩偷拍一区| 欧美网站一区二区三区| 欧美一区二区三区免费播放视频了| 99久久精品一区二区| 26uuu色噜噜精品一区二区| 99精品国产一区二区三区麻豆| 欧美精品五区| 国产精品久久久久久久妇女| 午夜av免费观看| 久久99精品一区二区三区| 久久综合伊人77777麻豆最新章节 一区二区久久精品66国产精品 | 久久乐国产精品| 日韩av中文字幕在线免费观看| 综合久久一区二区三区| 国产一区欧美一区| 亚洲精品久久久久不卡激情文学| 亚洲欧美国产一区二区三区| 国产精品国精产品一二三区| 久久噜噜少妇网站| 在线观看国产91| www亚洲精品| 少妇自拍一区| 国产伦精品一区二区三区免费优势| 国产日韩欧美不卡| 国产精品免费专区| 日韩毛片一区| 狠狠躁日日躁狂躁夜夜躁av| 国产伦精品一区二区三区免费迷| 欧美日韩国产在线一区| 999亚洲国产精| 久久99精品国产麻豆宅宅| 国产欧美一区二区三区不卡高清| 一区二区在线精品| 中文字幕一级二级三级| 欧美精品日韩| 99久久婷婷国产亚洲终合精品| 一区二区三区欧美视频| 日韩av在线影院| 欧美精品久| 理论片午午伦夜理片在线播放 | 久久99国产精品久久99果冻传媒新版本| 日韩精品中文字幕在线| 日本丰满岳妇伦3在线观看| 免费a级毛片18以上观看精品| 国产精品综合一区二区| 福利视频亚洲一区| 亚洲欧美日韩一级| 久久精品二| 国产又黄又硬又湿又黄 | 亚洲国产一区二区久久久777| 亚洲国产精品日本| 久久福利视频网| 午夜毛片影院| 国产床戏无遮挡免费观看网站| 国产欧美精品va在线观看| 91亚洲国产在人线播放午夜| 野花社区不卡一卡二| 91高跟紫色丝袜呻吟在线观看| 国产乱了高清露脸对白| 97人人模人人爽人人喊小说| 欧美视屏一区| 美国三级日本三级久久99| 精品综合久久久久| 国产精品一区在线观看| 17c国产精品一区二区| 91avpro| 高清国产一区二区| 99久久免费精品视频| 久久网站精品| 国产v亚洲v日韩v欧美v片| 日韩午夜三级| 国产一区网址| 日韩午夜三级| _97夜夜澡人人爽人人| 精品国产一二三四区| 亚洲精品乱码久久久久久写真| 香蕉av一区| 精品国产一区二| 99久久精品国产国产毛片小说| 欧美性二区| 高清欧美精品xxxxx| 亚洲精品久久久久久久久久久久久久| 国产亚洲精品久久久久动| 欧美日韩国产在线一区二区三区 | 午夜看片网站| 久久国产精品免费视频| 日韩精品一区二区久久| 国产伦精品一区二区三区电影| 欧美一区二区三区黄| 一区二区三区欧美视频| 久久精品二| 一区二区国产盗摄色噜噜| 亚洲三区二区一区| 亚洲乱小说| 激情久久一区二区| 国产精品无码永久免费888| 国产性猛交xx乱| 亚洲欧美日韩精品suv| 国产一区二区视频免费在线观看| 国产日韩欧美不卡| 国产精品一二三四五区| 日韩欧美国产另类| 性色av色香蕉一区二区| 一级女性全黄久久生活片免费 | 国产乱淫精品一区二区三区毛片| 99精品偷拍视频一区二区三区 | 男人的天堂一区二区| 国产一区二区视频免费在线观看| 日本道欧美一区二区aaaa| 91麻豆精品国产91久久久无限制版| 视频一区二区三区欧美| а√天堂8资源中文在线| 欧美国产一区二区在线| 久久国产中文字幕| 99久久国产综合精品色伊| 99色精品视频| 国产综合亚洲精品| 午夜特片网| 一本一道久久a久久精品综合蜜臀 国产三级在线视频一区二区三区 日韩欧美中文字幕一区 | 欧美激情国产一区| 国产精品乱码久久久久久久久| 国产一区二三| 99爱精品视频| 国产精品免费一区二区区| 欧美日韩国产色综合一二三四| 欧美精品亚洲一区| 一区二区三区四区中文字幕 | 国产一区二区综合| 亚洲精品久久久久一区二区| 91精品第一页| 真实的国产乱xxxx在线91| 亚洲区日韩| 91高清一区| 国产精品久久久久久久久久久新郎| 国产精品久久久麻豆| 亚洲精品老司机| 欧美一区二区三区久久精品视| 欧美在线播放一区| 精品久久香蕉国产线看观看gif| 国产大学生呻吟对白精彩在线| 99视频国产在线| 久久91精品国产91久久久| 国产69精品久久久久按摩| 四季av中文字幕一区| 精品一区二区三区中文字幕| 亚洲欧美日韩精品suv| 国产欧美日韩亚洲另类第一第二页| 国产高清在线精品一区二区三区| 91精品黄色| 一区二区在线国产| 日韩av中文字幕第一页| 国产一区二区资源| 国产精品日韩高清伦字幕搜索| 99热一区二区| 一区二区三区四区视频在线| 99精品视频一区| 久久69视频| 亚洲欧美自拍一区| 国产精品免费观看国产网曝瓜| 91精品国产高清一二三四区 | 国模精品免费看久久久| 国产偷久久一区精品69| 欧美一级片一区| 久久精视频| 久久不卡精品| 午夜社区在线观看| www.久久精品视频| 91精品久久久久久久久久| 午夜影院啪啪| 欧美精品二区三区| 91黄色免费看| 久久天天躁夜夜躁狠狠躁2022| 精品国产乱码久久久久久虫虫| 国产精品欧美久久| 国产99久久九九精品| 久久中文一区| 91免费看国产| 欧美一区二区三区久久久久久桃花| 99久久免费精品国产免费高清| 午夜影院伦理片| 久久精品亚洲一区二区三区画质| 免费精品一区二区三区第35| 超碰97国产精品人人cao| 日本高清h色视频在线观看| 欧美一区二区三区久久精品| 国产一区二区二| aaaaa国产欧美一区二区| 一区二区三区国产欧美| 国产88av| 久久午夜精品福利一区二区 | 亚洲精品456在线播放| 精品国产亚洲一区二区三区| 国产精品一二二区| 97人人模人人爽人人喊0| 久久福利免费视频| 欧美三级午夜理伦三级老人| 国产精品一区一区三区| 国产一区三区四区| 午夜看大片| 一区二区欧美精品| 国产真裸无庶纶乱视频| 亚洲精品日韩精品| 欧美一级不卡| 久久国产欧美一区二区免费| 国产高清一区在线观看| 国产一区二| 7799国产精品久久99| xxxxhd欧美| 日本高清不卡二区| 久久国产欧美一区二区三区免费| 国产69精品久久久久久野外| 国产一区二三| 国产精品伦一区二区三区视频| 国产一区二区在线免费| 日韩精品免费一区二区夜夜嗨| 狠狠色噜噜狠狠狠四色米奇| 国产电影精品一区| 人人玩人人添人人澡97| 国产欧美日韩二区| 亚洲精品456在线播放| 日韩av在线影院| 中文字幕一区三区| 国产特级淫片免费看| 亚洲区日韩| 欧美在线视频二区| 91看片淫黄大片91| 国产1区2| 国产在线精品一区| 国产69精品久久久久久| 精品午夜电影| 久久影视一区二区| 国产日韩欧美三级| 欧美精品在线一区二区| 99热久久精品免费精品| 日韩精品一区二区三区四区在线观看| 欧美二区在线视频| 91九色精品| 久久综合国产精品| 97人人澡人人添人人爽超碰| 国产日韩欧美网站| 亚洲午夜久久久久久久久电影院| 99久久国产免费,99久久国产免费大片| 国产亚洲精品久久久久久久久动漫|