[發明專利]圖像處理裝置和圖像處理方法

有效

• 申請號: 201710976964.3
• 申請日: 2017-10-19
• 公開（公告）號: CN109684901B
• 公開（公告）日: 2023-06-06
• 發明（設計）人: 沈偉;劉汝杰
• 申請（專利權）人: 富士通株式會社
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/44;G06V10/82;G06N3/0455;G06N3/0464;G06N3/048;G06N3/08
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 唐京橋;劉雯鑫

1.一種圖像處理裝置，包括：

自編碼單元，用于對輸入圖像進行自編碼以生成多個特征圖；

參數生成單元，用于根據所述多個特征圖生成用于卷積神經網絡的多個卷積核；以及

輸出單元，用于利用所述卷積神經網絡，根據所述輸入圖像和所述多個卷積核生成所述輸入圖像的輸出結果，

其中，所述參數生成單元包括：

特征生成單元，用于針對所述多個特征圖中的每個特征圖，生成對應于所述特征圖的局部特征和全局特征；以及

卷積核生成單元，用于針對所述多個特征圖中的每個特征圖，根據所述特征圖的局部特征和全局特征生成對應于所述特征圖的卷積核，

其中，所述卷積核生成單元通過以下操作生成對應于每個特征圖的卷積核：

對連接后的局部特征和全局特征執行非線性映射以生成權重矩陣；以及

根據所述權重矩陣和基準卷積核集合生成對應于所述特征圖的卷積核，并且

其中，所述基準卷積核集合包括多個卷積核，并且所述權重矩陣包括用于所述基準卷積核集合中的每個卷積核的權重。

2.根據權利要求1所述的圖像處理裝置，其中，所述自編碼單元包括多個第一卷積單元，并且所述自編碼單元用于將輸入圖像依次經過所述多個卷積單元以分別生成所述多個特征圖。

3.根據權利要求1所述的圖像處理裝置，其中，所述特征生成單元通過以下操作生成對應于每個特征圖的局部特征和全局特征：

針對所述多個特征圖中的每個特征圖，生成對應于所述特征圖的局部特征；以及

針對所述多個特征圖中的每個特征圖，根據生成的多個局部特征生成對應于所述特征圖的全局特征。

4.根據權利要求3所述的圖像處理裝置，其中，所述特征生成單元對特征圖執行池化操作以生成對應于所述特征圖的局部特征。

5.根據權利要求3所述的圖像處理裝置，其中，所述特征生成單元通過以下操作生成對應于每個特征圖的全局特征：

將生成的多個局部特征進行連接；以及

將連接后的多個局部特征通過全連接網絡以生成所述全局特征，

其中，生成對應于不同的特征圖的全局特征時通過的全連接網絡不同。

6.根據權利要求1所述的圖像處理裝置，其中，所述輸出單元包括多個第二卷積單元，并且所述輸出單元用于將所述輸入圖像依次經過所述多個第二卷積單元以生成輸出圖像，

其中，所述多個卷積核分別用于所述多個第二卷積單元。

7.一種圖像處理方法，包括：

對輸入圖像進行自編碼以生成多個特征圖；

根據所述多個特征圖生成用于卷積神經網絡的多個卷積核；以及

利用所述卷積神經網絡，根據所述輸入圖像和所述多個卷積核生成所述輸入圖像的輸出結果，

其中，根據所述多個特征圖生成用于卷積神經網絡的多個卷積核包括：

針對所述多個特征圖中的每個特征圖執行以下操作：生成對應于所述特征圖的局部特征和全局特征；以及根據所述局部特征和全局特征生成對應于所述特征圖的卷積核，

其中，根據所述局部特征和全局特征生成對應于所述特征圖的卷積核包括：

對連接后的局部特征和全局特征執行非線性映射以生成權重矩陣；以及

根據所述權重矩陣和基準卷積核集合生成對應于所述特征圖的卷積核，并且

其中，所述基準卷積核集合包括多個卷積核，并且所述權重矩陣包括用于所述基準卷積核集合中的每個卷積核的權重。

8.一種機器可讀存儲介質，其上攜帶有包括存儲在其中的機器可讀指令代碼的程序產品，其中，所述指令代碼當由計算機讀取和執行時，能夠使所述計算機執行根據權利要求7所述的圖像處理方法。