[發(fā)明專利]一種圖像處理方法及計(jì)算設(shè)備

有效

• 申請(qǐng)?zhí)枺?/td>: 201910180916.2
• 申請(qǐng)日: 2019-03-11
• 公開（公告）號(hào): CN109949240B
• 公開（公告）日: 2021-05-04
• 發(fā)明（設(shè)計(jì)）人: 陳裕潮;李志陽;李啟東;陳康;張偉
• 申請(qǐng)（專利權(quán)）人: 廈門美圖之家科技有限公司
• 主分類號(hào): G06T5/00
• 分類號(hào): G06T5/00;G06T3/40;G06N3/04
• 代理公司: 北京思睿峰知識(shí)產(chǎn)權(quán)代理有限公司 11396
• 代理人: 高攀;張贊

1.一種圖像處理方法，適于在計(jì)算設(shè)備中執(zhí)行，所述方法包括步驟：

獲取與原始圖像對(duì)應(yīng)的低分辨率圖像；

將所述低分辨率圖像與所述原始圖像作為輸入圖像輸入到圖像處理機(jī)器學(xué)習(xí)模型組件中，獲取相較于所述原始圖像具有更高分辨率且更豐富的細(xì)節(jié)信息的高分辨率完整圖像，其中，所述圖像處理機(jī)器學(xué)習(xí)模型組件是通過深度引導(dǎo)濾波組件與不用于深度引導(dǎo)濾波組件的并行網(wǎng)絡(luò)組件耦合生成的，且所述圖像處理機(jī)器學(xué)習(xí)模型組件利用預(yù)先獲取的多組圖像集進(jìn)行訓(xùn)練得到，其中，所述多組圖像集包括高分辨率完整圖像集、高分辨率圖像集以及低分辨率圖像集，其中，所述將低分辨率圖像與原始圖像作為輸入圖像輸入到圖像處理機(jī)器學(xué)習(xí)模型組件中，獲取相較于原始圖像具有更高分辨率且更豐富的細(xì)節(jié)信息的高分辨率完整圖像的步驟包括：將低分辨率圖像與原始圖像作為輸入圖像輸入到深度引導(dǎo)濾波組件，獲取第一輸出圖像；將第一輸出圖像作為輸入圖像輸入到并行網(wǎng)絡(luò)組件，獲取第二輸出圖像；所述第一輸出圖像與第二輸出圖像按照預(yù)定比例組合生成高分辨率完整圖像；

其中，利用所述多組圖像集對(duì)所述圖像處理機(jī)器學(xué)習(xí)模型組件進(jìn)行訓(xùn)練的步驟包括：獲取高分辨率完整圖像集、高分辨率圖像集以及低分辨率圖像集；構(gòu)建所述圖像處理機(jī)器學(xué)習(xí)模型組件，并設(shè)置有初始的全網(wǎng)絡(luò)參數(shù)；利用高分辨率圖像集、低分辨率圖像集與高分辨率完整圖像集之間的對(duì)應(yīng)關(guān)系分批次對(duì)所述圖像處理機(jī)器學(xué)習(xí)模型組件進(jìn)行訓(xùn)練，調(diào)整所述全網(wǎng)絡(luò)參數(shù)，直到所述圖像處理機(jī)器學(xué)習(xí)模型組件達(dá)到預(yù)設(shè)要求，

其中，所述利用高分辨率圖像集、低分辨率圖像集與高分辨率完整圖像集之間的對(duì)應(yīng)關(guān)系分批次對(duì)所述圖像處理機(jī)器學(xué)習(xí)模型組件進(jìn)行訓(xùn)練，調(diào)整所述全網(wǎng)絡(luò)參數(shù)，直到所述圖像處理機(jī)器學(xué)習(xí)模型組件達(dá)到預(yù)設(shè)要求的步驟包括：將高分辨率圖像集、低分辨率圖像集和高分辨率完整圖像集這三組圖像集劃分為包括這三種圖像類型的第一訓(xùn)練圖像集和第二訓(xùn)練圖像集；調(diào)整所述圖像處理機(jī)器學(xué)習(xí)模型組件中的深度引導(dǎo)濾波組件與并行網(wǎng)絡(luò)組件的預(yù)定權(quán)重比例，在所述預(yù)定權(quán)重比例上，第一訓(xùn)練圖像集和第二訓(xùn)練圖像集按順序?qū)λ鰣D像處理機(jī)器學(xué)習(xí)模型組件進(jìn)行訓(xùn)練，調(diào)整所述全網(wǎng)絡(luò)參數(shù)，直到所述圖像處理機(jī)器學(xué)習(xí)模型組件達(dá)到預(yù)設(shè)要求，其中，所述預(yù)定權(quán)重比例是隨著訓(xùn)練次數(shù)的增加逐漸減小直至變?yōu)楣潭?quán)重比例。

2.如權(quán)利要求1所述的方法，其中，所述并行網(wǎng)絡(luò)組件包括視覺幾何組網(wǎng)絡(luò)組件。

3.如權(quán)利要求1所述的方法，其中，所述圖像處理機(jī)器學(xué)習(xí)模型組件的輸出圖像是由深度引導(dǎo)濾波組件輸出的第一圖像與并行網(wǎng)絡(luò)組件輸出的第二圖像按照預(yù)定比例組合而獲得。

4.如權(quán)利要求1-3中任一項(xiàng)所述的方法，其中，所述圖像處理機(jī)器學(xué)習(xí)模型組件利用預(yù)先獲取的多組圖像集進(jìn)行訓(xùn)練得到的步驟包括：

利用所述多組圖像集中的部分圖像集對(duì)所述深度引導(dǎo)濾波組件進(jìn)行訓(xùn)練，調(diào)整與所述深度引導(dǎo)濾波組件對(duì)應(yīng)的第一網(wǎng)絡(luò)參數(shù)；

利用所述多組圖像集中除所述部分圖像集外的剩余圖像集對(duì)所述深度引導(dǎo)濾波以及所述并行網(wǎng)絡(luò)組件進(jìn)行協(xié)同訓(xùn)練，調(diào)整與所述圖像處理機(jī)器學(xué)習(xí)模型組件對(duì)應(yīng)的全網(wǎng)絡(luò)參數(shù)。

5.如權(quán)利要求4所述的方法，其中，所述并行網(wǎng)絡(luò)組件是利用網(wǎng)絡(luò)圖像集執(zhí)行初始化后的組件。

6.如權(quán)利要求5所述的方法，其中，利用第一訓(xùn)練圖像集對(duì)所述圖像處理機(jī)器學(xué)習(xí)模型組件進(jìn)行訓(xùn)練的步驟包括：

將第一訓(xùn)練圖像集中的高分辨率圖像集與低分辨率圖像集輸入到所述深度引導(dǎo)濾波組件，獲取中間輸出圖像集；

利用中間輸出圖像集與高分辨率完整圖像集的對(duì)應(yīng)關(guān)系，調(diào)整所述深度引導(dǎo)濾波組件對(duì)應(yīng)的第一網(wǎng)絡(luò)參數(shù)，直到所述深度引導(dǎo)濾波組件達(dá)到第一預(yù)設(shè)要求。

7.如權(quán)利要求6所述的方法，其中，所述第一預(yù)設(shè)要求是指利用L1范數(shù)作為損失函數(shù)獲取的中間輸出圖像與高分辨率完整圖像之間的損失函數(shù)值達(dá)到第一預(yù)定閾值。