[發(fā)明專利]用于處理圖像的系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201711284807.2
• 申請日: 2017-12-07
• 公開（公告）號: CN108257095A
• 公開（公告）日: 2018-07-06
• 發(fā)明（設(shè)計）人: 莎拉·拉奈斯;文森特·德斯皮格爾;揚·拉斐爾·里夫奇茲;史蒂芬·基恩特里克
• 申請（專利權(quán)）人: 法國艾德米亞身份與安全公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06N3/04
• 代理公司: 北京同達信恒知識產(chǎn)權(quán)代理有限公司 11291
• 代理人: 黃志華;李欣

1.一種用于處理圖像(4)的系統(tǒng)(1)，所述系統(tǒng)(1)包括主神經(jīng)網(wǎng)絡(luò)(2)、優(yōu)選基于卷積的主神經(jīng)網(wǎng)絡(luò)(CNN)，和至少一個在所述主神經(jīng)網(wǎng)絡(luò)(2)的上游的預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)、優(yōu)選基于卷積的預(yù)處理神經(jīng)網(wǎng)絡(luò)，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)用于在通過所述主神經(jīng)網(wǎng)絡(luò)(2)進行處理之前進行至少一種關(guān)于其參數(shù)是可微分的參數(shù)變換f，所述參數(shù)變換被應(yīng)用于所述圖像的像素的至少一部分并且具有形式p′＝f(V(p)，Θ)，式中，p為原始圖像的處理過的像素或所述圖像的分解的處理過的像素，p'為變換后的圖像的像素或所述變換后的圖像的分解的像素，V(p)為所述像素p的鄰域，Θ為參數(shù)的向量，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)使其學習的至少一部分與所述主神經(jīng)網(wǎng)絡(luò)(2)的學習同時地進行。

2.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述變換f使所述像素在所述圖像上是空間不變的。

3.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)被設(shè)計成進行逐像素的修正，尤其進行色彩校正、色調(diào)補償或伽瑪校正，或噪音閾值化操作。

4.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)被配置成應(yīng)用局部操作符，尤其是用于管理局部模糊或局部對比度的局部操作符。

5.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)被配置成在所述圖像的變換之后應(yīng)用頻率空間中的操作符，優(yōu)選地被配置成降低模擬噪音或數(shù)字噪音，尤其被配置成降低壓縮偽影、改善所述圖像的清晰度、清楚度或?qū)Ρ榷龋蛘弑慌渲贸蛇M行濾波，例如直方圖均衡化、所述圖像的動態(tài)擺動的校正、數(shù)字水印類型的圖案的刪除、頻率校正和/或圖像的清潔。

6.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)包括一個或多個卷積層CONV和/或一個或多個完全連接層FC。

7.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)被配置成進行非線性變換，尤其是像素的伽瑪校正和/或局部對比度校正。

8.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)被配置成應(yīng)用比色變換。

9.根據(jù)權(quán)利要求1所述的系統(tǒng)，包括輸入操作符，所述輸入操作符使得能夠向起始圖像應(yīng)用輸入變換，以基于所述起始圖像在所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)的上游生成與所述起始圖像的空間不同的空間中的數(shù)據(jù)，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)被配置成對這些數(shù)據(jù)起作用，所述系統(tǒng)包括輸出操作符，所述輸出操作符被設(shè)計成通過與所述輸入變換相反的輸出變換來恢復(fù)在所述起始圖像的處理空間中由所述預(yù)處理神經(jīng)網(wǎng)絡(luò)處理的數(shù)據(jù)，從而生成通過所述主神經(jīng)網(wǎng)絡(luò)處理的校正的圖像。

10.根據(jù)權(quán)利要求9所述的系統(tǒng)，其中，所述輸入操作符被配置成應(yīng)用小波變換，所述輸出操作符被配置成應(yīng)用逆變換。

11.根據(jù)權(quán)利要求9所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)被配置成對圖像壓縮偽影和/或圖像的清晰度起作用。

12.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)被配置成生成對應(yīng)于低分辨率映射(7)的一組向量(9)，所述系統(tǒng)包括被配置成通過插值、尤其雙線性插值生成對應(yīng)于較高分辨率映射(8)的一組向量的操作符，所述較高分辨率映射(8)優(yōu)選具有與起始圖像相同的分辨率。

13.根據(jù)權(quán)利要求1所述的系統(tǒng)，其中，所述主神經(jīng)網(wǎng)絡(luò)和所述預(yù)處理神經(jīng)網(wǎng)絡(luò)被訓(xùn)練以進行生物計量學的分類、識別或檢測，尤其面部的生物計量學的分類、識別或檢測。

14.一種根據(jù)權(quán)利要求1所述的系統(tǒng)的所述主神經(jīng)網(wǎng)絡(luò)(2)和所述預(yù)處理神經(jīng)網(wǎng)絡(luò)(6)的學習的方法，其中，與所述主神經(jīng)網(wǎng)絡(luò)的訓(xùn)練同時地進行所述預(yù)處理神經(jīng)網(wǎng)絡(luò)的所述學習的至少一部分。